hadoop 2.4.1单机安装教程 99.9%成功率

最新推荐文章于 2020-07-27 13:47:24 发布

xcagy

最新推荐文章于 2020-07-27 13:47:24 发布

阅读量186

点赞数

分类专栏： HADOOP 文章标签：田尚滨 HADOOP单机安装

本文为博主原创文章，未经博主允许可以转载。

本文链接：https://blog.csdn.net/ccagy/article/details/86776994

版权

HADOOP 专栏收录该内容

18 篇文章 0 订阅

订阅专栏

1.先自己安装centos7.X 64位

2.自己想办法安装JDK1.7,记住不要open sdk的

3.准备好hadoop-2.4.1 64位，官网下载默认是32位的，所以上淘宝买CSDN下载

4.修改系统配置

vim /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=k1

vim /etc/hosts

192.168.0.109 k1

reboot

5.修改hadoop环境变量

export JAVA_HOME=/usr/local/java/jdk7
export HADOOP_HOME=/root/hadoop-2.4.1
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOOME/sbin:$HADOOP_HOME/lib:$JAVA_HOME/binexport HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_HOME/lib/native
export HADOOP_OPTS=-Djava.library.path=$HADOOP_HOME/lib

然后source /etc/profile

6.修改hadoop配置文件

第一个：hadoop-env.sh
       vim hadoop-env.sh
       #第27行
       export JAVA_HOME=/usr/java/jdk1.7.0_65

   第二个：core-site.xml

<property>
           <name>fs.defaultFS</name>
           <value>hdfs://weekend-1206-01:9000</value>
       </property>
       
       <property>
           <name>hadoop.tmp.dir</name>
           <value>/home/hadoop/hadoop-2.4.1/tmp</value>
</property>

   第三个：hdfs-site.xml hdfs-default.xml (3)
       
       <property>
           <name>dfs.replication</name>
           <value>1</value>
</property>

   第四个：mapred-site.xml (mv mapred-site.xml.template mapred-site.xml)
       mv mapred-site.xml.template mapred-site.xml
       vim mapred-site.xml
       
       <property>
           <name>mapreduce.framework.name</name>
           <value>yarn</value>
</property>

   第五个：yarn-site.xml
       
       <property>
           <name>yarn.resourcemanager.hostname</name>
           <value>weekend-1206-01</value>
</property>
       
<property>
           <name>yarn.nodemanager.aux-services</name>
           <value>mapreduce_shuffle</value>
</property>