Hadoop
iteye_12007
这个作者很懒,什么都没留下…
展开
-
hadoop资料汇总
Hadoop官方的中文文档 http://hadoop.apache.org/common/docs/r0.18.2/cn/index.html Hadoop学习资料 -- 这里面总结了很多的东西,值得一一细看 http://cloud21.javaeye.com/blog/607175 关于Hadoop的两本书 -- 有电子书下载 http://caibinbu...原创 2013-09-30 11:52:50 · 118 阅读 · 0 评论 -
Hadoop基本操作命令
在这篇文章中,我们默认认为Hadoop环境已经由运维人员配置好直接可以使用。 假设Hadoop的安装目录HADOOP_HOME为/home/admin/hadoop。 [b]启动与关闭 [/b] 启动Hadoop 1. 进入HADOOP_HOME目录。 2. 执行sh bin/start-all.sh 关闭Hadoo...原创 2013-10-16 22:53:05 · 183 阅读 · 0 评论 -
Hadoop LZO压缩【转】
[size=large] 在hadoop中使用lzo的压缩算法可以减小数据 的大小和数据的磁盘读写时间,不仅如此,lzo是基于block分块的,这样他就允许数据被分解成chunk,并行的被hadoop处理。这样的特点,就可以让lzo在hadoop上成为一种非常好用的压缩格式。 lzo本身不是splitable的,所以当数据为text格式时,用lzo压缩出来的数据当做job的输入是一...原创 2013-11-08 08:52:17 · 175 阅读 · 0 评论