芝法酱学习笔记（0.1）——Ubuntu下，Java开发环境的基本搭建

一、本章目标

书接上回，服务器已经安装完成，下面我们需要安装基本的开发环境。本次学习打算以Java后端开发为中心进行拓展，目前先安装Java开发、部署必备的一些软件。

基础部分

• gcc
  gcc是c++的编译软件，一些软件的安装包需要源码编译，故预先安装
• JDK
  搞Java研发，自然离不开JDK。打算安装几个经典版本，JDK8，JDK11，JDK17，JDK（最新）
  在环境变量设置上，增加一个默认版本的变量，方便shell脚本自动设置
• maven
  毫无疑问，maven也是必须安装的。现在很少有人手动编译Java工程了吧
• mysql
  关系型数据库先搞个mysql，打算装8.x版本
• redis
  一般作为缓存，属于现代Java开发必备中间件
• nginx/openresty
  用于网关和前端部署。我一般习惯安装openresty版本的，方便做lua拓展
• tomcat
  一些老项目还是使用Spring框架做的，还是有必要稍微研究一下。

拓展安装

但这些远远不够，我们还需要设计出一套方便CI,CD的流程，故需要安装如下软件

• docker
• harbor
• nexus
• jenkins
  K8S相关的暂时先不安装，等搞到那个地方的时候再安装。由于篇幅限制，这些每样单独开一篇文章。

二、gcc等基础软件安装

2.1 gcc安装

这些基础软件，我们使用Ubuntu的apt-get命令安装

apt update
apt install gcc
apt install g++
apt install build-essential

更新一下Ubuntu

do-release-upgrade

三、ubuntu文件夹规划

在做一些安装前，我们需要对Ubuntu的文件夹做一些规划，方便日后管理。初步规划如图：
先在根目录创建一个WORK的文件夹，在该文件夹下创建如下子文件夹内

mkdir DOWNLOADS DOCUMENTS SDK MIDDLEWARE SOFTWARE APP

其中：

• DOWNLOADS作为下载文件夹
• DOCUMENTS存放文档
• SDK 存放类似JDK的代码库
• MIDDLEWARE 放诸如mysql redis tomcat的中间件
• SOFTWARE 放普通软件
• APP 放部署的项目

四、JDK安装

4.1 下载与解压

JDK的安装包可以去Oracle官网下载
这里要注意，我们要下载的是Linux版的，并且是X64，不要下成arm64了。
JDK8和JDK11,可以直接从我提供的链接下载，注意，这里的链接需要注册一下Oracle账号。
下载好的tar包，拖到DOWNLOADS下

mkdir /WORK/SDK/JAVA
cd /WORK/DOWNLOADS
tar -xzvf jdk-8u411-linux-x64.tar.gz -C /WORK/SDK/JAVA
tar -xzvf jdk-11.0.23_linux-x64_bin.tar.gz -C /WORK/SDK/JAVA
tar -xzvf jdk-17_linux-x64_bin.tar.gz -C /WORK/SDK/JAVA
tar -xzvf jdk-21_linux-x64_bin.tar.gz -C /WORK/SDK/JAVA
cd /WORK/SDK/JAVA
mv jdk1.8.0_411 8
mv jdk-11.0.23 11
mv jdk-17.0.12 17
mv jdk-21.0.4 21

4.2 配置环境变量

linux系统下的环境变量脚本，通常放在/etc/profile中，阅读该脚本代码，我们可以大概猜出，该脚本的意思就是遍历profile.d文件夹下的所有脚本，并执行他。所以，我更推荐在这个文件夹下配置环境变量的脚本。

cd /etc/profile.d
vim java.sh

export JAVA_DEFAULT_VERSION=17
JAVA_HOME=/WORK/SDK/JAVA
export JAVA_HOME_8=$JAVA_HOME/8
export JAVA_HOME_11=$JAVA_HOME/11
export JAVA_HOME_17=$JAVA_HOME/17
export JAVA_HOME_22=$JAVA_HOME/22
export JAVA_HOME=$JAVA_HOME/$JAVA_DEFAULT_VERSION
export PATH=$JAVA_HOME/bin:$PATH
```bash
chmod +x java.sh
source /etc/profile
java --version

如果展示出Java的版本，说明配置成功

五、安装maven

我写这篇帖子的时候，maven的版本是3.9.8，我就按这个版本配置了

5.1 安装解压

首先从官网下载安装包

tar -xzvf apache-maven-3.9.8-bin.tar.gz -C /WORK/SOFTWARE/maven/
mv apache-maven-3.9.8 3.9

5.2 配置config文件

maven的配置文件放在conf/settings.xml中，我们在搭建nexus时会再次修改这个文件，本次只配置Java的Jar包下载位置即可。

<localRepository>/WORK/SDK/JAVA/reposity</localRepository>

5.3 配置环境变量

vim /etc/profile.d/meven.sh

MAVEN_VERSION=3.9
export MAVEN_HOME=/WORK/SOFTWARE/maven/$MAVEN_VERSION
export PATH=$PATH:$MAVEN_HOME/bin

source /etc/profile
mvn --version

如果出现maven版本，则说明安装成功

六、安装mysql

6.1 下载安装

首先去官网下载dpkg包，放到/WORK/DOWNLOADS下

dpkg -i /WORK/DOWNLOADS/mysql-apt-config_0.8.32-1_all.deb
apt-get update
apt-get install mysql-server
systemctl status mysql

6.2 配置账号

我们先搞2个mysql账号，一个是app，用于Java连接mysql；一个是dbMgr，用于管理mysql

mysql> create role role_dbMgr;
mysql> create role role_app;
mysql> GRANT ALL ON *.* to role_dbMgr;
mysql> GRANT SELECT,UPDATE,INSERT,DELETE ON *.* to role_app;
mysql> select user,authentication_string,plugin,host from user;
mysql> CREATE USER 'dbMgr'@'%' IDENTIFIED WITH caching_sha2_password by '??@7' DEFAULT ROLE role_dbMgr COMMENT 'database manager';
mysql> CREATE USER 'app'@'%' IDENTIFIED WITH caching_sha2_password by 'Ilv0404@1314' DEFAULT ROLE role_app COMMENT 'app user';
mysql> flush privileges;

七、安装redis

7.1 下载安装

cd /WORK/DOWNLOADS
wget https://download.redis.io/redis-stable.tar.gz
mkdir /WORK/SOFTWARE/redis
mkdir /WORK/MIDDLEWARE/redis
mkdir /WORK/MIDDLEWARE/redis/current
tar -xzvf redis-stable.tar.gz -C /WORK/SOFTWARE/redis
cd /WORK/SOFTWARE/redis
mv redis-stable current
cd current
apt-get install pkg-config
make
make install

编译后的可执行文件会放到src下
默认会把redis的工具装到/usr/local/bin下

7.2 配置

使用vim编辑redis.conf修改以下配置

requirepass ilv0404@1314  #连接密码
daemonize yes					 #用守护进程启动
logfile log/redis.log     #log文件存放位置
dir /WORK/MIDDLEWARE/redis/current  #指定dump.rdb路径
pidfile /WORK/MIDDLEWARE/redis/current/run/redis_6379.pid #pid位置
dbfilename dump.rdb

7.3 redis自启动

mkdir /etc/redis
cp redis.conf /etc/redis/redis.conf
cd /etc/systemd/system
vim redis.service

做如下编辑

[Unit]
Description=Redis Server
After=network.target
 
[Service]
Type=falk
ExecStart=/usr/local/bin/redis-server /etc/redis/redis.conf
ExecStartPost=/bin/sleep 1  #这是黄金一笔
ExecStop=/usr/local/bin/redis-cli -a ???@1314 shutdown
Restart=always
User=redis
Group=redis
PIDFile=/WORK/MIDDLEWARE/redis/current/run/redis_6379.pid
RuntimeDirectory=/WORK/MIDDLEWARE/redis/run
RuntimeDirectoryMode=2755
 
[Install]
WantedBy=multi-user.target

systemctl daemon-reload
systemctl enable redis

7.4 遇到的问题

当出现如下警告时：

WARNING Memory overcommit must be enabled! Without it, a background save or replication may fail under low memory condition. 
Being disabled, it can also cause failures without low memory condition, see https://github.com/jemalloc/jemalloc/issues/1328. 
To fix this issue add 'vm.overcommit_memory = 1' to /etc/sysctl.conf and then reboot or run the command 'sysctl vm.overcommit_memory=1' for this to take effect.

则需要修改/etc/sysctl.conf文件，添加

vm.overcommit_memory = 1

注意我/etc/systemd/system/redis.service中的那个黄金一笔。由于我们使用传统的守护进程，系统在启动时可能没来得及生成守护进程的pid文件，然而ubuntu找不到对应的文件，以为redis挂了，所以就没有后面的事情了。
当出现用命令行启动redis没问题，但使用systemctl启动redis没有pid时，就要注意这个问题。
还有一种用系统管理pid的方法，supervised systemd，暂时不想研究了。
参考帖子

八、安装openresty

8.1 下载安装

openresty的安装，可以参考官网的说明进行
查看一下系统的版本

lsb_release -a

由于先前，我进行过ubuntu的升级，我现在的版本是22.x的，故采用相应的办法安装

apt install apt-transport-https
apt install ca-certificates
apt-get -y install --no-install-recommends wget gnupg ca-certificates lsb-release
wget -O - https://openresty.org/package/pubkey.gpg | sudo gpg --dearmor -o /usr/share/keyrings/openresty.gpg

echo "deb [arch=$(dpkg --print-architecture) signed-by=/usr/share/keyrings/openresty.gpg] http://openresty.org/package/ubuntu $(lsb_release -sc) main" | sudo tee /etc/apt/sources.list.d/openresty.list > /dev/null
apt-get update
sudo apt-get -y install openresty

8.2 设置环境变量

为了方便日后操作，我们把openresty和nginx设置环境变量
默认openresty安装在/usr/local/openresty目录下

cd /etc/profile.d
vim openresty.sh
...
chmod +x openresty.sh
cd ..
source profile
which nginx
nginx -v

shell 脚本内容

PATH=/usr/local/openresty/bin:$PATH
PATH=/usr/local/openresty/nginx/sbin:$PATH
export PATH

8.3 创建工作目录

首先，我打算把所有部署的服务放在工作目录/WORK/APP中

cd /WORK
mkdir APP
cd APP
mkdir nginx
cd nginx
mkdir html conf logs lua
#把nginx自带的一些文件拷过来
cd /usr/local/openresty/nginx
cp -r html /WORK/APP/nginx
cp -r conf /WORK/APP/nginx

html 文件夹下，放置静态页面。我们首先在这个文件夹下，放一个测试页面，写上hello openresty
conf 文件夹下，放置nginx的配置
logs 文件夹下，放置日志
lua 文件夹下，放置lua脚本

8.4 启动nginx

cd /WORK/APP/nginx
nginx -s stop
nginx -p `pwd`/ -c conf/nginx.conf

通过ip访问服务器，查看是否能访问到我们刚才编写的hello openresty

8.5 测试lua

在lua文件夹下，创建一个init.lua的文件，创建一个斐波那契额数列的函数，lua文件如下：

_G.zhifa_math = {}

_G.zhifa_math.fabMemo = {}
_G.zhifa_math.fabMemo[1] = 1
_G.zhifa_math.fabMemo[2] = 1

_G.zhifa_math.fab = function (n)
	if type(n) ~= "number" or n < 1 then
		return nil
	end
	n = math.floor(n)
	if _G.zhifa_math.fabMemo[n] ~= nil then
		return _G.zhifa_math.fabMemo[n]
	end
	local res = _G.zhifa_math.fab(n-1) + _G.zhifa_math.fab(n-2)
	_G.zhifa_math.fabMemo[n] = res
	return res
end

配置conf/nginx.conf

#服务器启动，加载lua文件
init_worker_by_lua_block{
        package.path = "/WORK/APP/nginx/lua/?.lua;" .. package.path
        dofile "lua/init.lua"
        return
   }
   server {
   		listen		80;
   		...
   		location /fab {
                default_type text/plain;
                content_by_lua_block {
                        local args = ngx.req.get_uri_args()
                        if nil == args.n then
                                ngx.say('the integer n is required which indicate the index of fabArr')
                        end
                        local n = tonumber(args.n)
                        if n < 2 then
                                ngx.say('n must be an integer larger than 2')
                        end
                        local res = zhifa_math.fab(n)
                        ngx.say("result is : "..res)
                }
        }
   }
   

重新加载文件

nginx -p `pwd`/ -c conf/nginx.conf -s reload