虚拟机搭建

最新推荐文章于 2024-03-17 19:38:05 发布

小风波_

最新推荐文章于 2024-03-17 19:38:05 发布

阅读量129

点赞数

文章标签： hadoop

本文链接：https://blog.csdn.net/dashujun_ounou/article/details/109013518

版权

1，

vim /etc/sysconfig/network #把localhost修改为namenode
2，重启 reboot 或者 shutdown -r 0
3，service iptables stop #关闭防火墙

chkconfig iptables off #永久关闭防火墙
4，安装jdk

rpm -ivh jdkxxx.rpm ,之后到 /usr/java/jdkxxx 目录下查看

配置环境变量，测试

vim /etc/profile

JAVA_HOME=/usr/java/jdkxxx ,之后 source /etc/profile
5，安装Hadoop2.6.5

tar-zxvf xxx -C /opt/
6，配置Hadoop环境变量，在linux任意位置都可以使用hadoop命令
vim /etc/profile
export HADOOP_PREFIX=/opt/hadoop-2.6.5
export PATH=PATH:PATH:PATH:HADOOP_PREFIX/bin:$HADOOP_PREFIX/sbin
7，重启文件，让文件生效
source /etc/profile
8, 修改/etc/hosts文件，在里面添加
192.168.x.x namenode

9，免秘钥配置
ssh-keygen -t dsa -P ‘’ -f ~/.ssh/id_dsa
cat ~/.ssh/id_dsa.pub >> ~/.ssh/authorized_keys

cd ~/.ssh/

[root@namenode .ssh]# ls
id_dsa id_dsa.pub known_hosts
[root@namenode .ssh]# ll -a
总用量 20
drwx------ 2 root root 4096 10月 10 16:47 .
dr-xr-x—. 3 root root 4096 10月 10 16:42 …
-rw------- 1 root root 668 10月 10 16:47 id_dsa
-rw-r–r-- 1 root root 603 10月 10 16:47 id_dsa.pub
-rw-r–r-- 1 root root 401 10月 10 16:42 known_hosts
[root@namenode .ssh]# cp id_dsa.pub namenode.pub

10，配置Hadoop环境文件，
cd /opt/hadoop-2.6.5/etc/hadoop/
vi hadoop-env.sh
修改为自己安装的JDK，注意是修改不是添加
export JAVA_HOME=/usr/java/jdkxxx
11，配置core-site.xml
vi core-site.xml

!
<property>
<name>fs.defaultFS</name>
<value>hdfs://node1:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/var/hadoop/local</value>
</property>
12,vim hdfs-site.xml
!
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>node1:50090</value>
</property>