![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
escaflone
这个作者很懒,什么都没留下…
展开
-
Hadoop 中为什么使用Interface Writable 代替 Serializable
1、Writable 提供比 Serializable 更高 比例的压缩 2、Serializable 中有太多hadoop所无需关心的元数据 3、Doug认为, 他需要对整个序列化的过程全部掌控。 4、既然JAVA中,int有包装类Integer,那再多一个IntWriteable 也是可以理解的 5、如果用户使用Integer, 也完全可以在hadoop中完美序列化。 参考原创 2013-06-08 10:31:49 · 1308 阅读 · 0 评论 -
关于Hadoop 的配置信息
1、启动Hadoop 必须要有几个配置文件,作为NameNode必须要有core-site.xml(不同版本可能不同),来指明nameNode的监听端口。 2、运行MapReduce测试程序时,如果没有hadoop命令,而是在IDE或是Java环境下,由于不知道配置文件在哪里,无法获取nameNode的监听端口,但是有默认值,默认值为本机的9000端口。 3、如果在IDE中运行测试,需要在主类原创 2013-06-20 23:59:23 · 1288 阅读 · 0 评论 -
hive 安装和使用
1、安装mysql netstat -tap|grep mysql 查看原创 2014-11-12 12:43:23 · 1503 阅读 · 0 评论