测试一个开源项目需要使用Ubuntu系统,在虚拟机中搭建原生的单点Hadoop(本地模式)
前置条件
1、jdk1.8
2、安装所需要的包
sudo apt-get install ssh
sudo apt-get install rsync
1、下载Hadopp
不要选错了
2、解压
tar -zxvf hadoop-2.6.5.tar.gz
3、配置hadoop-env.sh
指定hadoop与JDK的关联
vi /hadoop-2.6.5/etc/hadoop/hadoop-env.sh
修改export JAVA_HOME=/usr/java/jdk1.8
4、配置core-site.xml
vi /hadoop-2.6.5/etc/hadoop/core-site.xml
添加配置项
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
5、配置hdfs-site.xml
vi /hadoop-2.6.5/etc/hadoop/hdfs-site.xml
添加配置项
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
6、配置环境变量
echo 'export HADOOP_HOME=/usr/hadoop-2.6.5' >> /etc/profile
echo 'export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin' >> /etc/profile
source /etc/profile
7、格式化
hdfs namenode -format
8、启动
start-dfs.sh