最近由于一个项目比较忙,所以有短时间没能读书没能动手学习!
首先,说下为什么我要些hadoop的文章,由于我的个人兴趣在互联网方向,在这方面我有激情和行动力,就这么简单,当然这才是我的真正职业方向。
另外,这次安装是在ubuntu上安装,对于2年没碰linux的我来说忘记了好多命令,呵呵,废话少说,下面说安装过程。
建立hadoop的用户名和用户组
sudo addgroup hadoop
sudo adduser -ingroup hadoop hadoop
此hadoop无sudo权限,具体碰到的问题后面说
安装ssh
sudo age-get install ssh
创建SSH密钥
ssh-keygen -t rsa -P ''
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized.keys
由于之前用有sudo权限的awen用户解压的的hadoop目录,所以这里作一下更改
sudo chgrp hadoop /opt/hadoop-0.*.
修改/conf/hadoop-env.sh中hadoop的JAVA_HOME配置
然后更改core-site.xml,hdfs-site.xml,mapred-site.xml的配置信息
格式化hdfs
hadoop namenode format
启动hadoop
执行bin目下的start-all.sh脚本
关闭stop-all.sh
如果跟我一样对linux是菜鸟建议使用linux,这样可以将以前的一些linux知识捡起来
祝大家学习愉快!
首先,说下为什么我要些hadoop的文章,由于我的个人兴趣在互联网方向,在这方面我有激情和行动力,就这么简单,当然这才是我的真正职业方向。
另外,这次安装是在ubuntu上安装,对于2年没碰linux的我来说忘记了好多命令,呵呵,废话少说,下面说安装过程。
建立hadoop的用户名和用户组
sudo addgroup hadoop
sudo adduser -ingroup hadoop hadoop
此hadoop无sudo权限,具体碰到的问题后面说
安装ssh
sudo age-get install ssh
创建SSH密钥
ssh-keygen -t rsa -P ''
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized.keys
由于之前用有sudo权限的awen用户解压的的hadoop目录,所以这里作一下更改
sudo chgrp hadoop /opt/hadoop-0.*.
修改/conf/hadoop-env.sh中hadoop的JAVA_HOME配置
然后更改core-site.xml,hdfs-site.xml,mapred-site.xml的配置信息
格式化hdfs
hadoop namenode format
启动hadoop
执行bin目下的start-all.sh脚本
关闭stop-all.sh
如果跟我一样对linux是菜鸟建议使用linux,这样可以将以前的一些linux知识捡起来
祝大家学习愉快!