Hadoop学习笔记
拾依H
这个作者很懒,什么都没留下…
展开
-
hadoop常见问题——Warning: $HADOOP_HOME is deprecated.
问题现象执行hadoop命令的时候,经常出现Warning: $HADOOP_HOME is deprecated.原因分析Hadoop 在bin/hadoop和bin/hadoop-config.sh 中对HADOOP_HOME 进行了判断,报出错误的地方: bin /hadoop文件if [ "$HADOOP_HOME_WARN_SUPPRESS" == "" ] &&原创 2013-05-28 12:51:38 · 853 阅读 · 0 评论 -
hadoop常见问题——Browse the filesystem链接打不开
问题现象在访问Master:50070之后,点击browse the filesystem后,该页无法显示。原因分析点击browse the filesystem后,网页转向的地址用的是hadoop集群的某一个datanode的主机名,由于客户端的浏览器无法解析这个主机名,因此该页无法显示。解决办法需要在客户端的hosts文件里加入hadoop集群的ip地址与对应的主机名,这样原创 2013-05-28 12:52:32 · 1610 阅读 · 0 评论 -
hadoop常见问题——通过集群外服务器控制HDFS出现的permission denied权限问题
问题现象通过Hadoop集群外的电脑操作HDFS时,提示permission denied。原因分析老版本hadoop可以通过设置hadoop.job.ugi属性来获取对hdfs的操作权限,但是Clouder CDH3B3开始后hadoop.job.ugi不再生效。解决办法1、修改core-site.xml文件,增加以下两个属性 hadoop.proxyuser.原创 2013-06-19 16:52:42 · 1410 阅读 · 0 评论