单体应用切微服务初体验
文章目录
前言
好久没更新了,我也不知道自己在忙什么,反正恍恍惚惚之间,时间就过去了。
像一只没有目标的鸟,四处流浪,但又无处可去。没有像精卫那样一日复一日地填海,也没有像乌鸦那般,为了喝瓶子里的水,而四处找石子。
现在回看自己已完成的事,屈指可数。也看看接下来需要做的事情,多得数不过来,毕设,实习培训,毕业典礼等等。分身乏术,无从下手。
在过去的一段时间里,我对之前的单体应用转成了微服务,由于断断续续,只有晚上才有时间进行工作的原因,所以整个阶段耗时一星期。其中收获并不大,但还是有的。
本篇不讨论技术问题,只是讲感受以及遇到的问题及其解决方案,因此不保证解决方案是否完美。
时间线
- 2020-10-18—完成初稿
参考链接
接口安全-端口防火墙
https://www.oschina.net/question/3946713_2306635?sort=time
历程
抽取项目中共有的模块,独立出来
引入微服务组件对项目进行改造
本地测试
线上部署
问题及解决方案
注册中心Eureka如何加密
当初在课堂上,学习的时候,没有考虑到加密的需求。例如,如果注册中心未进行加密,当某个人想要盗取注册中心的服务时,就可以将这个服务注册到注册中心,可以任意盗取服务。
这种情况肯定是不可以发生的,一旦发生,整个项目的安全性将收到挑战。也因为这个原因,所以查找解决方案时,发现并不难,只要引入Spring Security即可。
注册中心设置
-
引入依赖
<dependency> <groupId>org.springframework.boot</groupId> <artifactId>spring-boot-starter-security</artifactId> </dependency>
-
设置安全检验
spring.security.user.name=zhj spring.security.user.password=1121 eureka.client.service-url.defaultZone=http://${spring.security.user.name}:${spring.security.user.password}@localhost:8761/eureka/
服务
-
相关配置
eureka.client.service-url.defaultZone=http://zhj:1121@localhost:8761/eureka/
线上部署微服务
刚开始时还想通过将微服务打包成war,部署到服务器Tomcat,但是尝试几次后,好像无法注册到Eureka注册中心。
最后想到打包成jar,然后写一个脚本就可以启动整个微服务了。
相关命令
./java.sh start # 启动脚本
./java.sh stop # 停止脚本
./java.sh restart # 重启脚本
主要shell内容如下(启动单个服务)
#!/bin/sh
# 服务标记
export EUREKA=MySISE_EurekaCentre-0.0.1-SNAPSHOT.jar
# 服务端口标记
export EUREKA_port=8761
# 读取启动参数
case "$1" in
start)
## 启动eureka
echo "--------eureka start--------------"
nohup java -Xms10m -Xmx100m -jar $EUREKA >/dev/null 2>&1 &
EUREKA_pid=`lsof -i:$EUREKA_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$EUREKA_pid" ]
do
EUREKA_pid=`lsof -i:$EUREKA_port|grep "LISTEN"|awk '{print $2}'`
done
echo "EUREKA pid is $EUREKA_pid"
echo "--------eureka start success--------------"
stop)
# eureka
P_ID=`ps -ef | grep -w $EUREKA | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===EUREKA process not exists or stop success"
else
kill -9 $P_ID
echo "EUREKA killed success"
fi
restart)
$0 stop
sleep 2
$0 start
echo "===restartAll success==="
;;
esac
exit 0
保证接口的安全性
这个问题可以说是从一开始就是在考虑的了,当项目进行线上部署的之前,我就在寻找解决方案了,发现各种解决方案都是JWT或者Outhor两者之一,反反复复看来,才发现这种接口安全指的是前后端分离所需的。而我值得接口安全并不是如此。
首先,这里需要考虑的接口安全,只是简简单单——所有的请求都通过模块获得结果,不能直接调用模块1-4进行获取。
但其实,需要考虑的安全不仅仅这些,当然另外的安全有其它的措施进行保证,或者存在后门。
最后的解决方案是来源于以下一个回答。
显然,当看到防火墙开放端口的时候,才反应过来,原来这么简单就解决了问题。
在服务器控制台就能设置端口的开放。当需要开放某个端口时,只要添加端口即可,被外界侦察到。例如模块的端口开放。当端口未开放时,是无法被外部侦察到的。如上面的模块1-4;
Feign请求超时问题
因为ribbon的默认配置是1s没响应,就默认判定请求失败,所以需要对默认配置进行修改。
因为消息队列响应时间过长,所以错误原因:
org.springframework.amqp.AmqpIOException: java.net.SocketTimeoutException: connect timed out
具体配置如下:
# 更改默认时间为5s
ribbon.ReadTimeout=5000
ribbon.connectTimeout=5000
总结
关于微服务的一些思考
在单体应用中,有一层是Service层,可以通过Service层进行逻辑编写。但有一个局限性,就是只能调用本项目的Service。而在微服务中,可以把接口改造成Service,在任何一个服务中进行调用,省去了每一个项目都需要一个模块的问题,但是也增加了复杂性。在单体中,只要项目不发生内部错误,都是可以运行的。但是微服务是使用http进行联系的,如果网络出现某些问题,整个微服务将无法互相调用。
所以一个好的RPC框架至关重要。
弃用微服务,使用单体
微服务并不是银弹。正如计算机科学家布鲁克斯的**《没有银弹》**中说道,在软件世界中,没有任何一种单纯的技术或管理上的进步,能够独立地承诺在10年内大幅度地提高软件地生产率,可靠性或简洁性。
这一次切微服务之后,我还是选回了使用单体。原因如下:
使用java -jar启动,多个微服务将会占用大量的内存,而实际所需的内存并不多。但在某些模块被使用时,又占用太多。附宝塔仪表盘数据
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-JkCKkPKI-1603024542869)(D:\learn\myblog\Spring Cloud Netfilx\img\image-20201018153154382.png)]
技术有限,这一次的微服务让我明白,一个人的技术是可以决定整个架构是否完整,是否健全。
从上面的内容可以看出我的技术栈并不是完整的,使用的技术都是从课堂学习而来,同时并不深入。从一开始的摩拳擦掌,到后面的缩手缩脚的。
解决方案可能存在过时。虽然最后还是完成了,但是回看整个技术栈,以及查找解决方案的时候,获知有很多技术已经断更了,例如注册中心Eureka。当一个技术框架断更,这是很严重的问题,因为这说明整个框架已经没有任何改进,甚至被弃用。
部署方式复杂。通过脚本方式部署非常复杂,而且容错性并不高,当某个模块出现异常时,还是和以前那样,整个项目将会奔溃。
甚至将各个独立的模块都合并到一个项目中。原因如下:
- 每一个独立模块都需要共同的模块,例如上传,审核等模块。如果选择单体,还是一如既往地独立模块,例如求助模块,买卖模块,需要用到的模块都是一样的。如果单体应用,还细分的话,将会出现大量的冗余。
附件1:完整的shell脚本
#!/bin/sh
export EUREKA=MySISE_EurekaCentre-0.0.1-SNAPSHOT.jar
export HELP=MySISE_Help-0.0.1-SNAPSHOT.jar
export GATE=MySISE_Gate-0.0.1-SNAPSHOT.jar
export USER=MySISE_User-0.0.1-SNAPSHOT.jar
export CHECK=MySISE_CheckState-0.0.1-SNAPSHOT.jar
export UPLOAD=MySISE_Upload-0.0.1-SNAPSHOT.jar
export MQ_PRODUCER=MySISE_MQ_Producer1.0-0.0.1-SNAPSHOT.jar
export MQ_CONSUMER=MySISE_MQ_Consumer1.0-0.0.1-SNAPSHOT.jar
export EUREKA_port=8761
export HELP_port=8087
export GATE_port=8090
export USER_port=8084
export CHECK_port=8091
export UPLOAD_port=8092
export MQ_PRODUCER_port=8094
export MQ_CONSUMER_port=8093
case "$1" in
start)
## 启动eureka
echo "--------eureka start--------------"
nohup java -Xms10m -Xmx100m -jar $EUREKA >/dev/null 2>&1 &
EUREKA_pid=`lsof -i:$EUREKA_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$EUREKA_pid" ]
do
EUREKA_pid=`lsof -i:$EUREKA_port|grep "LISTEN"|awk '{print $2}'`
done
echo "EUREKA pid is $EUREKA_pid"
echo "--------eureka start success--------------"
## 启动Help
echo "--------help start--------------"
nohup java -Xms10m -Xmx100m -jar $HELP >/dev/null 2>&1 &
HELP_pid=`lsof -i:$HELP_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$HELP_pid" ]
do
HELP_pid=`lsof -i:$HELP_port|grep "LISTEN"|awk '{print $2}'`
done
echo "HELP pid is $HELP_pid"
echo "--------help start success--------------"
## 启动USER
echo "--------user start--------------"
nohup java -Xms10m -Xmx100m -jar $USER >/dev/null 2>&1 &
USER_pid=`lsof -i:$USER_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$USER_pid" ]
do
USER_pid=`lsof -i:$USER_port|grep "LISTEN"|awk '{print $2}'`
done
echo "USER pid is $USER_pid"
echo "--------user start success--------------"
## 启动check
echo "--------check start--------------"
nohup java -Xms10m -Xmx100m -jar $CHECK >/dev/null 2>&1 &
CHECK_pid=`lsof -i:$CHECK_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$CHECK_pid" ]
do
CHECK_pid=`lsof -i:$CHECK_port|grep "LISTEN"|awk '{print $2}'`
done
echo "CHECK pid is $CHECK_pid"
echo "--------check start success--------------"
## 启动MQ_PRODUCER
echo "--------MQ_PRODUCER start--------------"
nohup java -Xms10m -Xmx100m -jar $MQ_PRODUCER >/dev/null 2>&1 &
MQ_PRODUCER_pid=`lsof -i:$MQ_PRODUCER_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$MQ_PRODUCER_pid" ]
do
MQ_PRODUCER_pid=`lsof -i:$MQ_PRODUCER_port|grep "LISTEN"|awk '{print $2}'`
done
echo "MQ_PRODUCER pid is $MQ_PRODUCER_pid"
echo "--------MQ_PRODUCER start success--------------"
## 启动MQ_CONSUMER
echo "--------MQ_CONSUMER start--------------"
nohup java -Xms10m -Xmx100m -jar $MQ_CONSUMER >/dev/null 2>&1 &
MQ_CONSUMER_pid=`lsof -i:$MQ_CONSUMER_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$MQ_CONSUMER_pid" ]
do
MQ_CONSUMER_pid=`lsof -i:$MQ_CONSUMER_port|grep "LISTEN"|awk '{print $2}'`
done
echo "MQ_CONSUMER pid is $MQ_CONSUMER_pid"
echo "--------MQ_CONSUMER start success--------------"
## 启动upload
echo "--------upload start--------------"
nohup java -Xms10m -Xmx100m -jar $UPLOAD >/dev/null 2>&1 &
UPLOAD_pid=`lsof -i:$UPLOAD_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$UPLOAD_pid" ]
do
UPLOAD_pid=`lsof -i:$UPLOAD_port|grep "LISTEN"|awk '{print $2}'`
done
echo "UPLOAD pid is $UPLOAD_pid"
echo "--------upload start success--------------"
## 启动GATE
echo "--------gate start--------------"
nohup java -Xms10m -Xmx100m -jar $GATE >/dev/null 2>&1 &
GATE_pid=`lsof -i:$GATE_port|grep "LISTEN"|awk '{print $2}'`
until [ -n "$GATE_pid" ]
do
GATE_pid=`lsof -i:$GATE_port|grep "LISTEN"|awk '{print $2}'`
done
echo "GATE pid is $GATE_pid"
echo "--------gate start success--------------"
;;
stop)
# eureka
P_ID=`ps -ef | grep -w $EUREKA | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===EUREKA process not exists or stop success"
else
kill -9 $P_ID
echo "EUREKA killed success"
fi
# help
P_ID=`ps -ef | grep -w $HELP | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===HELP process not exists or stop success"
else
kill -9 $P_ID
echo "HELP killed success"
fi
# user
P_ID=`ps -ef | grep -w $User | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===HELP process not exists or stop success"
else
kill -9 $P_ID
echo "HELP killed success"
fi
#upload
P_ID=`ps -ef | grep -w $UPLOAD | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===HELP process not exists or stop success"
else
kill -9 $P_ID
echo "HELP killed success"
fi
# check
P_ID=`ps -ef | grep -w $CHECK | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===HELP process not exists or stop success"
else
kill -9 $P_ID
echo "HELP killed success"
fi
#mq_producer
P_ID=`ps -ef | grep -w $MQ_PRODUCER | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===HELP process not exists or stop success"
else
kill -9 $P_ID
echo "HELP killed success"
fi
#mq_consumer
P_ID=`ps -ef | grep -w $MQ_CONSUMER | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===HELP process not exists or stop success"
else
kill -9 $P_ID
echo "HELP killed success"
fi
# gate
P_ID=`ps -ef | grep -w $GATE | grep -v "grep" | awk '{print $2}'`
if [ "$P_ID" == "" ]; then
echo "===GATE process not exists or stop success"
else
kill -9 $P_ID
echo "GATE killed success"
fi
echo "===stopAll success==="
;;
restart)
$0 stop
sleep 2
$0 start
echo "===restartAll success==="
;;
esac
exit 0
结尾
由于隔了一段时间,所以有些内容漏了,一时想不起来。如果想起来,会进行补充。
或者,关于微服务有什么问题,可以提出来,一起解决。