大数据最全群集【LNMP+SSL+nfs+负载均衡及高可用，2024年最新大数据开发面试必问

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

fastcgi_index index.php;
                fastcgi_param SCRIPT_FILENAME $documen{t}_{r}oot$fastcgi_script_name;
                include fastcgi_params;
                }
        }
server {
        listen 80;
        server_name blog.benet.com;

rewrite .* https://blog.benet.com; //指定重定向（http转https）

rewrite .* https://$host$request_uri redirect;

rewrite .* https://$serve{r}_{n}ame$request_uri redirect;

rewrite .* https://$server_name$1 redirect; //四条都可以重定向，一条即可。
        }
[root@web1 conf.d]# systemctl restart nginx

## mysql部署

[root@mysql ~]# rpm -ivh /media/mysql5.6-rpm/* --nodeps --force
[root@mysql ~]# systemctl start mysqld
[root@mysql ~]# systemctl enable mysqld
[root@mysql ~]# mysqladmin -uroot password
New password: //请输入新密码
Confirm new password: //请输入新密码
[root@mysql ~]# mysql -uroot -p123
//省略部分内容
mysql> create database blog;
Query OK, 1 row affected (0.00 sec)

mysql> grant all on blog.* to blog@‘%’ identified by ‘123456’;
Query OK, 0 rows affected (0.00 sec)

## php部署

[root@php ~]# rpm -ivh /media/php-rpm/* --nodeps --force

[root@php ~]# vim /etc/php-fpm.d/www.conf

listen = 192.168.1.10:9000 //修改为php本机IP

listen.allowed_clients = 192.168.1.7,192.168.1.8 //修改为web主机IP

[root@php ~]# systemctl start php-fpm

[root@php ~]# systemctl enable php-fpm

## nfs部署


### 创建共享目录

[root@nfs ~]# yum -y install nfs-utils rpcbind
[root@nfs ~]# cp -rp /media/wordpress-4.9.4-zh_CN.zip /
[root@nfs ~]# cd /
[root@nfs /]# unzip wordpress-4.9.4-zh_CN.zip //解压共享软件包
[root@nfs /]# vim /etc/exports
/wordpress 192.168.1.0/24(rw,sync,no_root_squash) //发布共享目录
[root@nfs /]# chmod -R 777 /wordpress
[root@nfs /]# systemctl start rpcbind nfs
[root@nfs /]# systemctl enable rpcbind nfs

### 挂载目录


1. web1挂载

[root@web1 ~]# showmount -e 192.168.1.11 //检查目录是否正常共享

Export list for 192.168.1.11:

/wordpress 192.168.1.0/24

[root@web1 ~]# mkdir /wordpress

[root@web1 ~]# mount -t nfs 192.168.1.11:/wordpress /wordpress //web1挂载目录

 ![](https://img-blog.csdnimg.cn/f3ea77a1ccfb4ffd812dbbafdb7f643e.png)



2. PHP挂载

[root@php ~]# mkdir /wordpress

[root@php ~]# mount -t nfs 192.168.1.11:/wordpress/ /wordpress //PHP挂载目录

![](https://img-blog.csdnimg.cn/ea489c0a5e50418195c9b5bc3cddc8f3.png)



## LNMP测试


        修改测试机hosts文件通过域名访问。

[root@client ~]# echo  “192.168.1.7 blog.benet.com” >> /etc/hosts

        访问浏览器blog.benet.com可以直接转到https，这就是上面重定向的作用。因为本机创建的证书，所以会有风险警告，点击高级


![](https://img-blog.csdnimg.cn/67ff6503692b43818a6aa79dd884badc.png)


![](https://img-blog.csdnimg.cn/93c3f4f570654f148b23adb17e392cb3.png)


        后面就是论坛的安装页面了，点击开始，输入数据库名、用户名密码及mysql服务器IP后点击提交，点击现在安装。


![](https://img-blog.csdnimg.cn/107e2116f1f5446ba6e55173c7aa7fc3.png)


![](https://img-blog.csdnimg.cn/6c94a912b7bc453ea450436056d8bbed.png)


![](https://img-blog.csdnimg.cn/448a25f87f1d41ba9875cf6772c1844b.png)


        输入论坛信息后，点击安装，安装完成后点击登录就可以输入管理员用户密码登录了。


![](https://img-blog.csdnimg.cn/27479f4e42d3453aa59a8350e7fade32.png)


 ![](https://img-blog.csdnimg.cn/91569a1a5f184b6bb8d65d855cfdaf6c.png)


         登录后就可以进行对论坛的编辑了。


![](https://img-blog.csdnimg.cn/a8371e555edf4c819567930a771ca630.png)


        经过上面的配置，lnmp和nfs就搭建好了，下面将实现负载均衡及高可用功能。


## web2部署


        web1已经配置过了配置文件和证书，这里直接复制过来。

[root@web2 ~]# rpm -ivh /media/nginx-rpm/* --nodeps --force
[root@web2 ~]# cd /etc/nginx/conf.d/
[root@web2 conf.d]# rm -rf default.conf
[root@web2 conf.d]# scp -rp root@192.168.1.7:/etc/nginx/conf.d/blog.conf .
[root@web2 conf.d]# cd …
[root@web2 nginx]# scp -rp root@192.168.1.7:/etc/nginx/ssl_key /etc/nginx //复制证书
[root@web2 nginx]# systemctl start nginx
[root@web2 nginx]# mkdir /wordpress
[root@web2 nginx]# mount -t nfs 192.168.1.11:/wordpress/ /wordpress //挂载论坛目录

## lb1部署


1. 负载均衡配置

[root@lb1 ~]# rpm -ivh /media/nginx-rpm/*  --nodeps --force
[root@lb1 ~]# cd /etc/nginx/conf.d/
[root@lb1 conf.d]# rm -rf default.conf
[root@lb1 conf.d]# vim lb.conf
upstream web {
        server 192.168.1.7:443;
        server 192.168.1.8:443;
        }
server {
        listen 443 ssl;
        server_name blog.benet.com;
        ssl_certificate ssl_key/server.crt;
        ssl_certificate_key ssl_key/server.key;
        location / {
                proxy_pass https://web;
                include nginx_params;
        }
}
server {
        listen 80;
        server_name blog.benet.com;
        return 302 https://$server_name$1;
        }
[root@lb1 conf.d]# cd …
[root@lb1 nginx]# vim nginx_params
proxy_set_header Host $http_host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_connect_timeout 30;
proxy_send_timeout 60;
proxy_read_timeout 60;

proxy_buffering on;
proxy_buffer_size 32k;
proxy_buffers 4 128k;
[root@lb1 conf.d]# scp -rp root@192.168.1.7:/etc/nginx/ssl_key /etc/nginx/ //复制证书
[root@lb1 conf.d]# nginx -t
[root@lb1 conf.d]# systemctl restart nginx

2. 高可用

[root@lb1 ~]# yum -y install keepalived
[root@lb1 ~]# vim /etc/keepalived/keepalived.conf
global_defs {
   router_id lb1 //修改路由名称
   vrrp_strict //删除此行
}
vrrp_instance VI_1 {
    state MASTER
    interface ens33 //指定网卡信息
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.1.200 //指定漂移地址
    }
}
[root@lb1 ~]# systemctl start keepalived

        查看漂移地址


![](https://img-blog.csdnimg.cn/a03ac9443c55456f847bb02058994548.png)




## lb2部署


1. 负载均衡

[root@lb2 ~]# rpm -ivh /media/nginx-rpm/* --nodeps --force

[root@lb2 ~]# scp -rp root@192.168.1.5:/etc/nginx/* /etc/nginx/

[root@lb2 ~]# cd /etc/nginx/conf.d/

[root@lb2 conf.d]# rm -rf default.conf

[root@lb2 conf.d]# systemctl start nginx

2. 高可用

[root@lb2 ~]# yum -y install keepalived
[root@lb2 ~]# vim /etc/keepalived/keepalived.conf
global_defs {
   router_id lb2 //修改路由名称
   vrrp_strict //删除此行
}
vrrp_instance VI_1 {
    state BACKUP //指定为备份主机
    interface ens33 //指定网卡信息
    virtual_router_id 51
    priority 99 //指定优先级
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.1.200 //指定漂移地址
    }
}
[root@lb2 ~]# systemctl start keepalived

## 群集测试


        删掉之前配置的hosts文件，指定IP为漂移地址。

[root@client ~]# vim /etc/hosts
192.168.1.200 blog.benet.com

        客户机访问blog.benet.com会自动转为https://blog.benet.com登录博客就成功了。


![](https://img-blog.csdnimg.cn/989767cee1f04fc0a03930f07dd4a0e2.png)


        通过关闭lb1的keepalived，查看lb2主机的ip地址， 确认漂移地址转到lb2主机上。继续访问浏览器发现 可以正常访问。


![](https://img-blog.csdnimg.cn/7a60d81c4aaf4da385fabaa249133eed.png)


### 解决故障


        开启lb1的 keepalived服务器，关闭nginx服务并访问网页会发现无法访问网页的问题，下面将解决这一问题。

[root@lb1 ~]# systemctl start keepalived
[root@lb1 ~]# systemctl stop nginx

![](https://img-blog.csdnimg.cn/9f474ea1f2104bd0b027808dde049e74.png)

[root@lb1 ~]# mkdir /sh
[root@lb1 ~]# vim /sh/check_nginx_proxy.sh
#!/bin/bash
killall  -0  nginx
if  [ $? -ne 0 ];then
  systemctl stop keepalived
fi
[root@lb1 ~]# chmod +x /sh/check_nginx_proxy.sh
[root@lb1 ~]# vim /etc/keepalived/keepalived.conf //将脚本追踪模块添加到keepalived配置文件
vrrp_script check_nginx_proxy {
        script “/sh/check_nginx_proxy.sh”
        interval 2
        weight 5
        }
vrrp_instance VI_1 { //分别在此模块内和上方添加两个模块
    state MASTER
    interface ens33
    virtual_router_id 51
    priority 100
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        192.168.1.200
    }
    track_script {
        check_nginx_proxy
        }
}
[root@lb1 ~]# systemctl restart keepalived

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

check_nginx_proxy
        }
}
[root@lb1 ~]# systemctl restart keepalived

[外链图片转存中…(img-zUXKkgW6-1715762590395)]
[外链图片转存中…(img-o6pCuW4Z-1715762590396)]

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！