大数据分析赛 - 基础配置

计算机程序设计员（大数据分析）赛项 - 基础配置模块题目操作

考核条件

1.按照左侧拟机名称修改对应主机名（分别为master、slave1、slave2,使用hostnamectl命令）
操作环境：master、slave1、slave2

2.修改host文件添加左侧naster、slave1、slave2节点IP与主机名映射（使用内网IP)
操作环墳：master、slave1、slave2

3.时区更改为上海时间(CST+0800时区)
操作环境：master、slave1、slave2

4.环境已经安装NTP,修改master节点NTP配置，设置master为本地时间服务器，屏蔽默认server,服务器层级设为10
操作环境：master

5.开启NTP服务
操作环境：master

6.添加定时任务-在早十-晚五时问段内每隔半个小时同步一次本地服务器时间(24小时制.使用用户root任务调度crontab,服务器地址使用主机名)
操作环境：slave1、slave2

7.主节点生成公钥文件id_rsa.pub(数字签名RSA,用户root,主机名master)
操作环境：master

8.建立master自身使用root用户ssh访问localhost免密登录
损作环境：master

9.建立master使用root用户到slave1的ssh免密登录访问
损作环境：master

10.建立master使用root用户到slave2的ssh免密登录访问
操作环境：master

11.将jdk安装包解压到/usr/java目录（安装包存放于/usr/package277/，路径自行创建。解压后文件夹为默认名称，其他安装同理）

0、先前步骤

关闭防火墙： systemctl stop firewalld.service

查看状态： systemctl status firewalld.service

systemctl stop firewalld    #关闭防火墙
systemctl disable firlewalld  #关闭防火墙开机启动

1、修改主机名

• 按照左侧拟机名称修改对应主机名（分别为master、slave1、slave2,使用hostnamectl命令）

# 三个都修改
hostnamectl set-hostname master
hostnamectl set-hostname slave1
hostnamectl set-hostname slave2

2、添加映射

• 修改host文件添加左侧naster、slave1、slave2节点IP与主机名映射（使用内网IP)

# 三个都添加
vim /etc/hosts

master内网IP master 
slave1内网IP slave1 
slave2内网IP slave2

3、修改为上海时间

• 时区更改为上海时间(CST+0800时区)

方法一：

tzselect
5（选择Asia）
9(China)
1(Beijing)
1(yes)

# 复制出现的参数 

vim /etc/profile

（G 光标跳到最后一行）

 粘贴

source /etc/profile

date 

参数位置：

方法二：

echo '参数' >> /etc/profile
source /etc/profile

4、修改NTP配置

• 环境已经安装NTP,修改master节点NTP配置，设置master为本地时间服务器，屏蔽默认server,服务器层级设为10

# master主机中：
vim /etc/ntp.conf

# 屏蔽默认（注释掉），添加以下内容
server 127.127.1.0
fudge 127.127.1.0 stratum 10 # 服务器层级10

# slave主机中：
ntpdate master # 同步master

5、开启NTP

• 开启NTP服务

systemctl restart nptd.service

6、添加定时任务

• 添加定时任务-在早十-晚五时问段内每隔半个小时同步一次本地服务器时间(24小时制.使用用户root任务调度crontab,服务器地址使用主机名)

crontab -e

*/30 10-17 * * * ntp绝对路径 master

crontab -l # 查看

ntp绝对路径 : whereis ntpdata

7、生成公钥文件

• 主节点生成公钥文件id_rsa.pub(数字签名RSA,用户root,主机名master)

ssh-keygen
# 然后敲三个回车

cd .ssh
ls # 查看

8、master免密登陆

• 建立master自身使用root用户ssh访问localhost免密登录

ssh-copy-id -i id_rsa.pub master

ssh master # 验证 若从ssh目录转到~目录则免密成功
exit # 退出

ssh localhost
exit
ls
cat known_hosts

9、slave1免密登陆

• 建立master使用root用户到slave1的ssh免密登录访问

ssh-copy-id -i id_rsa.pub slave1

ssh slave1 # 验证 
exit # 退出

10、slave2免密登陆

• 建立master使用root用户到slave2的ssh免密登录访问

ssh-copy-id -i id_rsa.pub slave2

ssh slave2 # 验证 
exit # 退出

11、解压jdk

• 将jdk安装包解压到/usr/java目录（安装包存放于/usr/package277/，路径自行创建。解压后文件夹为默认名称，其他安装同理）

# 创建目录
cd /usr/
mkdir java

# 解压
cd package277
tar -zxvf jdkXXX.tar.gz -C /usr/java/ 

# 查看jdk路径并记录
cd /usr/java/jdk # 快速补全：按tab键 在按enter
pwd # 复制jdk路径并记录

12、配置Java环境变量

master主机：

vim /etc/profile

# Java env
export JAVA_HOME=/usr/java/jdk1.8.0 # 根据自身jdk位置修改
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=$JAVA_HOME/lib
export PATH=$PATH:$JAVA_HOME/bin

# 生效变量
source /etc/profile

# 查看JDK版本
java -version

分发至slave：

# master 主机中
scp -r /usr/java root@slave1:/usr/
scp -r /usr/java root@slave2:/usr/

scp /etc/profile root@slave1:/etc/
scp /etc/profile root@slave2:/etc/

# slave1 slave2主机中
source /etc/profile
source /etc/profile