基于大数据学习在Linux上环境的搭建（持续更新中）

 

 

1.准备阶段

虚拟机、CRT/Xshell（终端模拟软件）、WinSCP（两个不同系统之间传输文件）

2. 基础环境搭建

1. 创建新的虚拟机
2. 自定义
3. 安装程序光盘映像文件（iso）（需要网上下载）
4. 一直下一步，等待
5. 选英文，日期shanghai，系统的网络与主机名，点开查看配置环境需要的信息，在关闭，开始安装
6. 安装完成后，重启，输入账号密码

   

Linux配置网卡
    命令：
        vi /etc/sysconfig/network-scripts/ifcfg-e按下tab不全命令
        如果进入的是一个空文件，命令写错了，直接:q退出
    1.刚进入，是一般模式，不能编辑内容
    2.按下i进入编辑模式
    3.把配置都补充完整
        修改：
        BOOTPROTO=static
        ONBOOT=yes
        添加：
        IPADDR=192.168.1.xx
        NETMASK=255.255.255.0
        GATEWAY=192.168.1.1
        DNS1=202.103.24.68
        DNS2=202.103.44.150
    4.按Esc，重新回到一般模式
    5.按:进入底部命令行，输入wq，按下回车
    6.重启网卡，让配置生效
        systemctl restart network
    7.ip a
    8.ping www.baidu.com
    9.ctrl+c停止ping

2.2远程工具链接Linux（CRT/Xshell）

这里选择的是CRT

1. 修改主机名为hadoop1。 

    hostnamectl --static set-hostname hadoop1  

     断开连接重连后，@后面的名字改变。作用：当主机名和ip进行映射的时候就体现了。
2. 修改主机名和ip地址的映射：修改/etc/hosts文件，在文件后面添加一行192.168.1.xx hadoop1，

   echo /etc/hosts >> 192.168.1.xx hadoop1

   作用：在Linux中，当需要输入ip地址的时候可以用名字代替，当需要修改的时候，只用改一个ip地址就行了（类似于java多态）；ex：ssh
3. windows上也可以配置主机名和ip的映射  C:\Windows\System32\drivers\etc\hosts文件，作用：在Window到Linux过程中，当需要输入ip地址的时候可以用名字代替；ex：使用CRT时
4. 做这些都作用都是为了ssh免密登录，ssh可以远程登录到linux节点，公钥和私钥来配对，验证用户的身份，每个节点都会有一对公钥和私钥
5. 每个节点使用命令
           ssh-keygen 四下enter，生成自己的公钥和私钥
6. 每个节点使用三次命令，对三个节点进行免密登录的配置
           ssh-copy-id hadoop1/hadoop2/hadoop3(前提是/etc/hosts文件配置完成)

2.3Linux中java的安装

# 所有主机
# 首先将jdk包上传到/root目录下
cd  /root
mkdir /usr/lib/java/
tar zxvf /root/jdk-8u25-linux-x64.tar.gz  -C /usr/lib/java/
echo "export JAVA_HOME=/usr/lib/java/jdk1.8.0_25/" >>/etc/profile
echo 'export PATH=$PATH:$JAVA_HOME/bin/' >>/etc/profile
source /etc/profile
java -version
rm -rf /root/jdk-8u25-linux-x64.tar.gz

如果java -version 显示为openjdk，那就卸载掉openjdk

2.4安装MySql

# 在hadoop1上
# 安装mysql
yum -y install  mariadb-server   mariadb
# 启动并设置开机自启
systemctl start mariadb.service
systemctl enable mariadb.service
# 进入mysql 并设置密码，默认为空
mysql -u root -p

2.5安装免密登录

    ssh可以远程登录到linux节点
    ssh： secure shell
    
    公钥和私钥来配对，验证用户的身份
    
    每个节点都会有一对公钥和私钥
    1.每个节点使用命令
        ssh-keygen 四下enter，生成自己的公钥和私钥
    2.每个节点使用三次命令，对三个节点进行免密登录的配置
        ssh-copy-id hadoop1/hadoop2/hadoop3(前提是/etc/hosts文件配置完成)