windows 8 wmware player centos 安装 伪分布式 hadoop

下载 CentOS-7-x86_64-Minimal-1511.iso

下载 VMware_player_7.0.0_2305329.1420626349.exe

(下载 和 安装 xshell,之后使用 xshell 与 centos 交互,个人习惯用法)


安装 vmware player


安装 centos,创建用户名 test,启动 centos


安装 net-tools,使用 ifconfig 查看 IP,填入 xshell 中 连接 centos

#yum install net-tools  

(这里 # 表示 root 用户, $ 表示普通用户)

#ifconfig



按上图和下图,在 xshell 中填入 192.168.243.128,使用 root 或 test 登录 centos



下载 和 安装 java

#yum list java*

列出的信息局部如下图




#yum install java-1.8.0-openjdk-devel.x86_64

验证 java

#java -version
#javac -version
#jps -version

配置 java 的环境变量

#which java
显示 为 /usr/bin/java,那么,JAVA_HOME=/usr

安装 ssh-server

#yum install openssh-server

使用 ssh 在局域网设置无密码登录

切换为 test 用户

$cd ~
$ssh-keygen -t rsa -P ""
$cd .ssh
$cat  id_rsa.pub >>authorized_keys
chmod 0600 authorized_keys

$ssh localhost


$ssh localhost



上图表示实现了无密码登录


下载 hadoop,这里的版本是 2.7.2

#yum install wget

$wget -o download_hadoop.log http://mirrors.hust.edu.cn/apache/hadoop/common/hadoop-2.7.2/hadoop-2.7.2.tar.gz &


解压缩下载的文件


$tar xzf hadoop-2.7.2..tar.gz


得到文件包 hadoop-2.7.2




进入 hadoop-2.7.2/et/hadoop

$cd hadoop-2.7.2/et/hadoop




使用 vim 编辑 hadoop-env.sh 文件,写入

export JAVA_HOME=/usr

或者,如果在 .bashrc 中写入了 export JAVA_HOME=/usr,则或可呈现如下




编辑 core-site.xml,在 <configuration> </configuration> 之间写入


<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>


<property>
<name>hadoop.tmp.dir</name>
<value>/a/path/you/need/to/set</value>
</property>


编辑 hdfs-site.xml, 同样的方式写入


<property>
<name>dfs.replication</name>
<value>1</value>
</property>


<property>
<name>dfs.namenode.name.dir</name>
<value>/a/path/you/need/to/set</value>
</property>



<property>
<name>dfs.datanode.data.dir</name>
<value>/a/path/you/need/to/set</value>
</property>


注,/a/path/you/need/to/set 是说,指定一个存放 namenode 数据的位置,比如 /home/test/hadoop/namenode


在 hadoop-2.7.2 目录下,执行

$bin/hdfs namenode -format



接着执行

$sbin/start-dfs.sh




$jps



安装 firefox 和 X Window Server

#yum install firefox

#yum groupinstall 'X Window System'


并在 windows 8 下 安装 xmanager


在 centos 执行


firefox localhost:50070






  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值