公司有个业务需要优化,场景是手机客户端上传小文件到服务端,需要支持断点上传。现在直接用tomcat直接面对客户端进行网络IO,现在准备把网络IO这块剥离出来,彻底交给Nginx+Lua来处理。理由有如下几点:
1、应用服务器还是乖乖的待在后端做业务就好,底层的网络IO跟具体业务无关,这样使得项目的维护更方便,看起来更清晰。
2、对于底层IO操作,不是java的强项,特别是手机用户网速慢的场景,非WIFI用户网速不快,传输时间长,且数据量是间歇性的,时有时无,这种场景使用Nginx的epoll模型最合适不过了。
3、可以使用Nginx做负载均衡进行扩展。
下面写一个小demo来让Nginx+Lua进行网络IO,流程如下:
客户端POST一行数据给Nginx,地址为:http://192.168.112.64:38080/upload,Lua脚本读取数据,如果读取超时,则把当前已读取到的数据POST到后端tomcat,地址为:http://192.168.112.64/GoSmsMarService/Test;如果读取正常,也把读取到的数据POST到后端tomcat。可以根据具体场景直接把POST数据PUSH到缓存服务器,可以提高命中率,因为大多数用户在收到文件后马上会去查看,tomcat服务器再去异步的从缓存服务器读取数据进行持久化。
这里使用了nginx的扩展版本openresty,已经包含了N多第三方模块,当然包括了要使用到的Lua模块,安装过程略。
nginx配置文件如下,Lua代码注释挺详细了,不赘述:
worker_processes 1; error_log logs/error.log; events { worker_connections 1024; } http { # 后端tomcat upstream tomcat { server 127.0.0.1; } server { listen 38080; # tomcat地址 location ~ ^/GoSmsMarService { proxy_store off; proxy_redirect off; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_set_head