大数据踩坑

Notepad++ 连接Linux

保证notepad中有NppFTP插件，之后点setting创建连接。

真服了

第一个Linux老师，让安装java1.8在opt 下，hadoop老师让安装1.7在opt/software下，而且他们的电脑还不冲突。 我现在要卸载之前的java1.8，重新安装1.7，配置hadoop的java1.7变量

安全配置普通用户变量方法：bashrc

/etc/profile的设置方法对所有登录的用户都有效。
~/.bashrc只对当前用户有效。
上面两个都是配置文件，开机后，系统会先读取/etc/profile，再读~/.bashrc。
不同的用户~/.bashrc文件可以有不同的设置，而/etc/profile则是共用一个，只有root才能修改。
~/.bashrc对/etc/profile有追加覆盖的效果。

这一段超棒！！！

---

又有问题了 启动datenode启动不了：

现在问题依次解决了：
1 resourcemanger 不起动
问题是处在配置yarn-site.xml是没写自己的hostname
2 重新初始化namenode之后，datenode不启动
问题是重新初始化之后，name和date的clustID不同，找到dfs下的二者的目录的version 修改成name的ID即可

---

现在问题是进不去hdfs的网站

解决：我在hdfs-site.xml中配置了

dfs.secondary.http.address
hostname:50070
#描述：secondarynamenode 运行节点的信息，和 namenode 不同节点
‘

我先是配置的50070，和namenode节点相同，secondarynamenode 无法启动，之后我改50070到50090，应该是切换了不同的节点，可以启动secondarynamenode 了

这段我真的服了 北风的老师根本都没讲这个 这快的几个坑我踩了4天，基本上摸索明白了。