Hadoop从入门到入土（第三天）

（今天学习的时候把hadoop的环境变量配置错了，然后所有命令就运行不了，被迫重开）

---

目录

一、安装hadoop

二、本地运行模式

---

一、安装hadoop

        打开Xshell7连接hadoop102>cd  /opt/software>ll>tar  -zxvf  hadoop文件名  -C  /opt/module/>cd  ..>cd  madule>cd  hadoop-3.1.3(自己hadoop的文件名）\ll>pwd(复制下面的连接)>sudo vim /etc/profile.d/my_env.sh>在里面添加：#HADOOP_HOME 回车 export HADOOP_HOME=粘贴刚刚复制的内容  回车  export PATH=$PATH:$HADOOP_HOME/bin 回车 export PATH=$PATH:$HADOOP_HOME/sbin  输入完成后保存>source /etc/profile(有时候可以省略这一步）>hadoop(显示就成功）；配置好后用ll查看里面有那些内容。

（注：修改系统文件：要么登陆管理员账户要么用sudo。）

二、本地运行模式

        本地：数据存储在linux本地（测试时用）

        伪分布式：数据存储在HDFS多台服务器工作（公司比较差钱用这个）

        完全分布式：数据存储在HDFS/多台服务器工作（企业大量使用）

        本地配置：在cd hadoop-3.1.3文件中>mkdir wccinput >ll>cd wcinput/>ll>vim word.txt(在里面写ss ss  换行  cls cls   换行   banzhang   换行   bobo  换行   yangge)>cd ..>ll>pwd>cd bin/>ll>cd ..>ll(如果对路径不熟悉的话）>bin/hadoop jar share/(按tab键）>hadoop/(tab键）>mapreduce/(按tab建两次）>h(tab)>e(tab)>wordcount(后续所有的mapreduce程序都必须指定输入路径和输出路径，并且输出路径不能存在）空格加两次tab>wcinput/   ./wcoutput(这个可以自己取名，文件夹不能存在） >回车执行>ll >cd wcoutput>ll>cat 文件名（查看数据）;成功案例：

 今日份学习笔记：