57篇文章 · 55226字 · 0人关注
-
hadoop 新增datanode 扩容我们的机器 由于 日志量大 又开始了扩容，hadoop 2.8 不支持 disk volume level rebalance ，hadoop...
-
谈谈scala 的模式匹配
在 java 中我倒是较少使用 switch case ，大部分都是if else 搞定但是在 scala 中 模式匹配 可以说是登峰造极...
-
scala sbt assembly 的坑 和打包资源文件业界一直把sbt simple build tools ,叫成 SB tool,说实话，入门没有maven 和gradle 简单， 稍...
-
使用scala 一些常用项任何一种语言的使用其实很多基础的内容，有时候就是这些很基础的内容，如果用的很生涩，会严重阻碍开发的效率。经过几个月的熟悉，也确认了 以scala...
-
关于 数据传输 谨慎 使用 删除
说真的，数据流的传输 真的是一件让人很头痛的事情，不管你多么努力，数据丢失和重复都是不可以避免的，尤其是在使用定时任务和shell 脚本，自己...
-
文件 经过多重压缩后一般我们的单文件只是经过一种 压缩工具压缩，同一个目录的则是又压缩又打包，但是我们似乎好像并没有尝试过 一个单独的文件 被 不同的压缩工具 ...
-
hdfs 实现 单文件压缩整体 写 mapreduce 有时候也会陷入 一种思维定势，以为 hadoop 只能做mapreduce，其实当然很可笑，hadoop 还是可以...
-
linux shell 脚本 流程控制的小 疏忽
linux shell if [: missing `]' 参考 http://blog.csdn.net/longxibendi/arti...
-
关于 linux crontab 定时任务的一些思考以前的定时任务都是使用 for循环加 sleep ，这种伪装的定时任务 有很大的局限性，为了 更好的使用数据流传输 到 hdfs，我们在不借助...
文集作者