![](https://img-blog.csdnimg.cn/20201014180756913.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop相关
文章平均质量分 80
doudoukb24
这个作者很懒,什么都没留下…
展开
-
hadoop的DFSOutputStream
当我们用命令:[java] view plaincopyprint?hadoop fs -copyFromLocal localfile hdfs://... hadoop fs -copyFromLocal localfile hdfs://...将本地文件复制到HDFS时,其背后的复制过程是怎样的?本地文件通过什么方式传输到datanode上转载 2012-03-15 21:24:14 · 421 阅读 · 0 评论 -
Hadoop上配置jconsole
其实总结起来在hadoop上配置Jconsole有关键的两步:1、 建立jmxremote.password文件 ,文件内容为用户名和密码;然后重新设定文件权限:使用语句chmod 600 xx/xxx/xxx/jmxremote.password ,其中xx/xxx/xxx/表示文件所在的绝对路径,必须做这一步,否则会提示 error jmxremote.password access mu原创 2012-03-15 17:03:26 · 1117 阅读 · 0 评论 -
关于hadoop中datanode节点不同的dfs.data.dir之间数据均衡问题
本文转载自http://www.cnblogs.com/serendipity/archive/2012/04/17/2453428.html,在这里感谢博主分享。问题:集群中的存储数据增大,导致datanode的空间都快占满了(以前的dfs.data.dir=/data/hdfs/dfs/data),机器的硬盘监控程序不停的报警 。 给每台机器加了一倍的存储硬转载 2012-11-14 22:32:01 · 3572 阅读 · 0 评论