汉南最後の読書人

问题就出现在了while (e != null)，从上面的代码看来，每一个线程进来都先执行dataMap = new HashMap()；这个时候dataMap是空的，所以在执行下面的操作的时候进入了某一个不可以随意更改状态的代码中，再加上高并发，一直被new HashMap()，while一直被执行，变成了死循环。cpu就瞬间飙升到100%，一直持续到请求数降低的时候。重构问题代码，多线程并发扩容时就会出现环形引用的问题，从.........

需求背景：现有用户的出行轨迹都存储在分布式的hbase库中，管理员需要从地图上框选一个矩形或多边形区域，找出该区域和指定时间内活动的用户及其出行轨迹，进行分析。经过调研，了解到关于地理索引有一套比较通用的GeohHash算法，于是使用geohash实现该空间搜索的逻辑。GeoHash是将二维的经纬度转换成字符串，每一个字符串代表了某一矩形区域。也就是说，这个矩形区域内所有的点（经纬度坐标）都共享相同的GeoHash字符串，比如说我在七天酒店，我朋友在附近的世纪百货，我们的经纬度点会得到相同的GeoHash.

问题来源：kafka多个topic的消费数据使用到了线程池的监听消费，以异步处理，提高效率。但是生产上代码运行一段时间后会报java.lang.OutOfMemoryError： unable to create new native thread 程序宕掉，是一个生产致命错误。线程池配置如下： private static ThreadFactory threadFactory = new ThreadFactoryBuilder().setNameFormat("thread-pool.

分布式项目在通过一定的服务拆分，项目运行一段时间以后，随着用户和使用资源的不断增大，数据库的性能也会面临瓶颈。单表数据量过大，超高并发的读写引发的锁问题，导致系统运行加载越来越慢，不时出现系统假死的现象，数据库的优化已将近极限，几乎没有空间，这时就需要考虑读写分离，分库分表（这里主要是水平的分库分表）的策略，来减少对同一数据库的访问的压力。一.操作的工程目录二.读写分离application.yml​spring: shardingsphere: data.

在使用SpringBoot开发项目时，随着业务量的扩大，我们通常会进行数据库拆分或引入其他数据库，因此需要配置多个数据源，并能实现其动态切换。一.工程目录截图二.相关代码2.1多数据源application.yml配置文件# 数据源配置spring: datasource: type: com.alibaba.druid.pool.DruidDataSource driverClassName: com.mysql.cj.jdbc.Dr...

在分布式项目的运维当中，经常会遇到服务器负载过高的问题，由于没有监控，一直没发现，直到业务方反馈系统操作速度慢，才发现问题，这样显得十分被动，于是打算搭建一套用于监控系统服务器的统一监控平台。一.实现的监控目标二.搭建所需的安装包及配置文件三.Prometheus服务端安装以下操作皆在监控主机（172.10.0.1）上执行3.1关闭防火墙# systemctl stop firewalld# systemctl disable firewalld3.2安装 ...

一.宝塔面板镜像的制作(本地VM虚拟机操作)1.重启docker服务systemctl daemon-reload;systemctl restart docker;2.拉取一个centos镜像作为基础镜像docker pull centos3.创建docker容器docker images;docker run -dit -it -p 8888:8888 --name=baota-centos 5d0da3dc9764(docker images命令查出的cento

、、分布式项目的打包部署增加了运维人员的工作量，而且工作是机械重复，极无技术含量的，说白就是打更。我们要把复杂的事情简单化，简单的事情标准化，标准的事情流程化，所以打包部署成了我们流程化里头的流水线。该项目是一个有5台+以上的服务器分流部署的分布式项目，针对该项目的自动化部署所作的持续集成拓扑图如下所示(截图有限，只画了3台，意思到位即可，IP为虚拟IP)：一.jenkins需要装的插件Git,Pipeline,Publish Over SSH等搜索安装即可二.配...

Java项目在Linux系统中的部署通常是以tomcat等容器化的方式部署，或者jar包的形式直接运行。在自动化部署畅行的今天，仍然会有不少的公司采用手动部署的方式部署 jar 包。而微服务打包形成的诸多jar，和上线前后频繁的诸多升级部署操作，让负责项目的开发运维人员叫苦不迭，因此需要一套便捷的部署脚本，实现便捷的一键启停等操作。1.常用的部署命令：ps -ef |grep 服务名kill -9 PIDnohup java -jar 服务名 &tail -f nohup.out.

一.何为分库分表分库分表就是为了解决由于数据量过大而导致数据库性能降低的问题，将原来独立的数据库拆分成若干数据库组成 ，将数据大表拆分成若干数据表组成，使得单一数据库、单一数据表的数据量变小，从而达到提升数据库性能的目的。分库分表包括分库和分表两个部分，在生产中通常包括：垂直分库、水平分库、垂直分表、水平分表四种方式。(大库拆成小库，大表拆成小表)二.根据病状，对症下药2.1 问题一： 磁盘读IO瓶颈，热点数据太多，数据库缓存放不下，每次查询时会产生大量的IO，降低查询速度解决办法： 分库和垂直分表

一.表字段建索引的优缺点优势：1.提高数据检索的效率，降低数据库的IO成本。2. 通过索引列对数据进行排序，降低数据排序的成本，降低了CPU的消耗。劣势：1.虽然索引大大提高了查询速度，同时却会降低更新表的速度，如对表进行INSERT、UPDATE和DELETE。因为更新表时，MySQL不仅要保存数据，还要保存一下索引文件每次更新添加了索引列的字段，都会调整因为更新所带来的键值变化后的索引信息。2.实际上索引也是一张表，该表保存了主键与索引字段，并指向实体表的记录，所以索引列也是要占用空间的。

一.概念1.1 使用 EXPLAIN 关键字可以模拟优化器执行 SQL 查询语句，从而知道 MySQL 是如何处理你的 SQL 语句的。分析你的查询语句或是表结构的性能瓶颈。1.2 用法： Explain+SQL 语句，例如：EXPLAIN SELECT t2.dept_id FROM sys_role_dept t1, sys_dept t2 WHERE role_id IN ( SELECT role_id FROM sys_user_role WHERE user_id = 1 )

介绍：如果一个接口中需要进行多步，而这些业务操作又是各自独立的，传统的依据代码顺序同步执行又比较耗时，传统的优化的空间又比较少，这时就可以考虑使用多线程的方式优化接口，让同步变异步，接口业务操作并行处理，极大提升接口的性能。在线程安全方面，我们可以使用CountDownLatch同步工具类来进行控制。 CountDownLatch是通过一个计数器来实现的，计数器的初始值为线程的数量。每当一个线程完成了自己的任务后，计数器的值就会减1。当计数器值到达0时，它表示所有的线程已经完成了任务，然后在闭锁上等待

该文章是继个人大屏接口方法系列：大屏的接口开发一： 基于SpringBoot的webSocket数据推送 之后的第二篇文章，也是实现大屏项目的服务端主动推送数据到前端的一个服务工具类，其相关的业务流程也是跟第一版有很大的相似之处1. SpringBoot整合Netty(pom.xml引入相关的jar包)<dependency> <groupId>io.netty</groupId> <artifactId>netty-all</artif

**在实际的项目开发中，需要用到大屏的展示，大屏的项目对于数据的实时性要求比较高，因此不能用http的接口，需要长连接的数据推送，大屏的免手动刷新，实现数据的同步变动展示。这里主要使用SpringBoot集成webSocket实现数据的全局发送，指定用户发送，值得注意的是这里使用了Spring自带的握手拦截器获取前端传来的userId，与webSocket的会话进行绑定，用于长连接的身份区分。如下是设计思路和代码实现。**1. SpringBoot整合WebSocket(pom.xml引入相关的jar.

一.VUE相关环境搭建1.去Node.js官网选择合适版本的Node.js，下载安装wget https://nodejs.org/dist/v12.18.0/node-v12.18.0-linux-x64.tar.xz解压缩至指定文件位置xz -d node-v14.3.0-linux-x64.tar.xztar -xvf node-v14.3.0-linux-x64.tar重命名文件夹mv node-v14.3.0-linux-x64 nodeJS-V14.3.0

一个集团内部系统间为了避免数据孤岛的情况出现，总是少不了数据的同步，因此系统间的接口就必不可少。但是开发出的接口在对接的时候总是会出现各种各样奇葩的问题。这里记录几种日常接口对接所踩的坑（注意：这里的接口联调是后端传后端，并非所谓的前后端对接）1.所调接口网络不通有些公司使用的是集团内部网络，经常会出现服务器之间网络不通的情况，Linux服务器排查思路测试对接的目标接口网络#telnet命令telnet 域名/IP 端口如： telnet xxx.xxx.com 443#...