- 博客(9)
- 收藏
- 关注
RSS订阅原创 使用线程池查询ES千万级数据索引遇到的问题
使用场景：公司接到一个需求，需要查询ES索引A中所有数据，并根据查询到的数据中的某个字段再去查询另外一个索引B，整合并获取最终需要的数据，再生成excel、上传oss等等。其中索引A和索引B中都存储了千万条数据，之前的同事是用单线程写的，查询索引A使用的是limit、from深层分页，最终数据生成大概需要…不知道需要多久，可能一个月也生成不出来，后来这个需求就落在了我这里。在做这个需求之前我从未使用过ES，对线程池也是一知半解。我想到了使用线程池会提高处理速度，经过了一番研究，终于将处理速度从4分钟处理
2022-03-27 13:44:06
3159
原创 All sentinels down, cannot determine where is myredis master is running...
前提：redis哨兵模式已经部署完毕，哨兵一定要配置单数并且大于等于3个，这样才能进行选举。在redis哨兵模式在服务器上看着能正常选举的时候，springboot整合redis哨兵报了个错，说All sentinels down, cannot determine where is myredis master is running…看application配置文件：spring.redis.database=#redis库，一般为0spring.redis.host=#master地址，主库的i
2021-12-01 12:03:29
3674
原创 Navicate远程连接服务器MySql
之前想连接好几次都没连接上，要么拒绝访问，拒绝连接，今天不知道咋了突然开窍了连接上了，记录一下！mysql是在ubantu下安装的。首先确保服务器端能正常连接mysql：mysql -uroot -p使用mysql数据库：use mysql查询一下user表中的user和host信息：select user, host from user;执行sql:GRANT ALL ON *.* TO 'root'@'%';:给root用户赋予所有权限update user set host =
2021-08-11 11:34:25
388
原创 ubantu单机安装RabbitMQ集群
单机多实例创建集群节点。RABBITMQ_NODE_PORT=5672 RABBITMQ_SERVER_START_ARGS="-rabbitmq_management listener [{port,15672}]" RABBITMQ_NODENAME=rabbit rabbitmq-server -detachedRABBITMQ_NODE_PORT=5673 RABBITMQ_SERVER_START_ARGS="-rabbitmq_management listener [{port,15673
2021-07-27 11:13:32
98
原创 ubantu安装RabbitMQ
我的RabbitMQ是在阿里云的服务器下安装的，ubantu版本，首先在虚拟机上先把RabbitMQ安装下来，因为RabbitMQ是使用Erlang语言编写的，所以在安装RabbitMQ之前需要先安装Erlang，但是这里如果使用docker安装RabbitMQ就不用再安装Erlang了，因为docker会自动帮我们把RabbitMQ所需要的Erlang下载下来。安装rabbitmq可以参考以下链接：link.安装erlangsudo apt-get install erlang-nox更
2021-07-27 10:53:01
100
原创 Docker部署SpringBoot项目和遇到的坑
Docker部署SpringBoot项目和遇到的坑首先确保SpringBoot项目在本地可以运行，这里我使用的很简单的项目，运行没问题之后使用Maven进行打包。idea右侧的工具栏。打包成功之后可以在target目录下看到生成对应的jar包，如图。把这个文件复制到和项目名同路径下，再创建一个Dockerfile文件，Dockerfile文件名大小写一定要保持一致，如图。Dockerfile文件中需要写的内容，如图：直接复制过去就可以，配置很简单，通过这个文件可以自己制作镜像。COPY
2021-07-13 17:54:47
1177
5
原创 ModuleNotFoundError: No module named 'pygame'
ModuleNotFoundError: No module named 'pygame'在命令行中输入:easy_install pygame
2020-04-01 09:25:21
746
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人