Hadoop平台搭建的常见错误及解决方法

Java HotSpot™ 64-Bit Server VM warning: You have loaded library /usr/local/hadoop252/lib/native/libhadoop.so which might have disabled stack guard. The VM will try to fix the stack guard now.
It’s highly recommended that you fix the library with ‘execstack -c ’, or link it with ‘-z noexecstack’.

译文：

Java HotSpot™ 64位服务器VM警告:您已经加载了库/usr/local/hadoop252/ ib/native/libhadoop。所以这可能•已禁用堆栈保护。VM现在将尝试修复堆栈保护强烈建议您使用“execstack-c ”修复库，或者使用“-z noexecstack”链接它。

解决方法：
在etc/hadoop/目录中的 hadoop-env.sh和yarn-env.sh 这两个文件中添加如下两行代码：

export HADOOP_COMMON_LIB_NATIVE_DIR=${HADOOP_PREFIX}/lib/native
export HADOOP_OPTS="-Djava.library.path=$HADOOP_PREFIX/lib"

 WARN util.NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable

解决办法：
直接在log4j日志中去除告警信息。在//usr/local/hadoop-2.5.2/etc/hadoop/log4j.properties文件中添加

log4j.logger.org.apache.hadoop.util.NativeCodeLoader=ERROR

1.将所有节点的tmp目录和logs目录下的文件清空清空。

rm -rf *

2.重新格式化namenode。

hadoop namenode -format

3.重新启动Hadoop集群

1、按“win +R”组合键，进入“运行”。

2、写入“msconfig”（不包括引号，可直接复制），按回车键。

3、进入“系统配置”，选中“服务”，勾选左下角“隐藏所有Microsoft服务”，再点击“全部禁用”，点击“应用”。

4、再打开“服务”边上的“启动”选项，打开“点击任务管理器”。

5、在列出的启动项上，找到VMware点击右键，选中“禁用”，禁止全部启动项。

6、关闭“任务管理器”，返回“系统配置”界面下点击“确定”，依据提示重启电脑。

7、电脑重启之后，再次按照上面流程启动所有服务，VMware就可以正常启动了；

vi /etc/profile

然后向里面加入如下的内容

export HDFS_NAMENODE_USER=root
export HDFS_DATANODE_USER=root
export HDFS_SECONDARYNAMENODE_USER=root
export YARN_RESOURCEMANAGER_USER=root
export YARN_NODEMANAGER_USER=root

输入如下命令使改动生效

source /etc/profile

解决方案二：
将start-dfs.sh，stop-dfs.sh(在hadoop安装目录的sbin里)两个文件顶部添加以下参数

HDFS_DATANODE_USER=root
HADOOP_SECURE_DN_USER=hdfs
HDFS_NAMENODE_USER=root
HDFS_SECONDARYNAMENODE_USER=root

将start-yarn.sh，stop-yarn.sh(在hadoop安装目录的sbin里)两个文件顶部添加以下参数

YARN_RESOURCEMANAGER_USER=root
HADOOP_SECURE_DN_USER=yarn
YARN_NODEMANAGER_USER=root