Hadoop
guoxy_nb
这个作者很懒,什么都没留下…
展开
-
Eclips中直接调试MP程序中需要注意的问题
下面是我在Eclipse中调试第一个MapReduce程序时遇到的问题及解决方法,这些方法都是在参考其他网友解决类似问题的基础上结合自己的理解与实验总结出来的,记录在这里希望能对其他人有所帮助。(1)在Eclipse中建立DFS Locations的时侯,要注意Map/Reduce Master是指MapReduce Job Tracker,DFS Master是指Namenode的配原创 2014-03-17 20:57:43 · 819 阅读 · 0 评论 -
HDFS容量的调整
在Hadoop中,数据文件放在HDFS上,每个DataNode的的数据文件存放的位置通过DataNode的hdfs-site.xml的属性dfs.data.dir设定,因此该属性指定的目录的空间容量决定了每个DataNode的容量,从而决定了HDFS的总容量。在CentOS,IDH(Intel Distributtion Hadoop)默认情况下设定的dfs.data.di原创 2014-03-17 20:40:21 · 6388 阅读 · 0 评论 -
Hive语言手册之一:CLI
博主按:近一段时间,一直在研究Hadoop及其上的应用技术,因为之前一直做关系数据库系统的开发与维护,在众多基于Hadoop的技术中,Hive与Hbase的使用方法一直是自己关注的重点。为了对Hive技术有一个准确的认识,开始着手研究Hive的官方技术文档。在阅读的时候顺手按照自己的理解翻译出来,写在博客上,权当然阅读本记,纯属自娱自乐,如果能给浏览的诸君带来些许的参考,翻译 2014-03-30 19:40:36 · 1995 阅读 · 0 评论