- 博客(8)
- 资源 (7)
- 收藏
- 关注
转载 Elasticsearch 6.0 一个索引只允许有一个type
一,单index,单type未来发布的elasticsearch 6.0.0版本为保持兼容,仍然会支持单index,多type结构,但是作者已不推荐这么设置。在elasticsearch 7.0.0版本必须使用单index,单type,多type结构则会完全移除。针对这一问题,elasticsearch 作者的讨论:https://github.com/elastic/elasticsearc...
2019-08-28 14:56:01 2173
转载 Bulk异常引发的Elasticsearch内存泄漏
背景介绍前天公司度假部门一个线上ElasticSearch集群发出报警,有Data Node的Heap使用量持续超过80%警戒线。 收到报警邮件后,不敢怠慢,立即登陆监控系统查看集群状态。还好,所有的节点都在正常服务,只是有2个节点的Heap使用率非常高。此时,Old GC一直在持续的触发,却无法回收内存。问题排查问题节点的Heapsize分配了30GB,80%的使用率约等于24G...
2019-08-27 14:35:31 3097
原创 Linux下应用进程消失原因分析
应用部署在Linux环境下,如果出现未知原因导致应用进程被杀(应用日志中没有任何异常现象,日志出现中断现象),如果对于进程消失原因没有特别明确的方向,可以考虑从系统日志(/var/log/messages)方面查找原因。命令参考egrep -i 'killed process' /var/log/messages## 或:egrep -i -r 'killed process' /v...
2019-08-23 16:59:40 9178 4
转载 消息队列MQ选型 - Kafka、RabbitMQ对比
适应场景异步处理,应用解耦,流量削锋和消息通讯RabbitMQ:使用erlang开发的开源消息队列,通过erlang的actor模型实现了数据的稳定可靠传输,支持AMQP、XMQP、SMTP等多种协议,因此也比较重量级。由于采用broker代理架构,发送给客户端时,先在阻塞队列进行排队,rabbitMQ的单机吞吐量在万级。kafka:由scala开发的高性能、跨语言、分布式消息队列,单...
2019-08-09 09:46:20 592
转载 分布式环境下定时任务单点运行
场景提供接口服务的API负载均衡在了7台机器上,要保证定时任务只在一台机器上跑,因为有些定时任务不能同时进行,并且多台机器同时执行定时任务也浪费资源,下面来讲讲如何实现定时任务单点运行。方案一:根据机器的IP来限制因为部署服务的7台机器ip是已知的,那么就可以通过ip来限制哪台机器上的应用可以跑定时任务,获取本服务器或者客户端ip方法,请移步至: Java获取客户端、本机IP @...
2019-08-06 10:02:23 857
转载 架构系列一:大型项目架构演进过程
作为一名程序员,单单只会Coding是远远不够的,想要走的更高更完,还必需懂Coding之外的其他东西,如架构设计,系统分析等,今天就架构这块,谈谈自己的理解一、单机时代单机时间的应用,都很简单,一个应用,一台服务器,就搞定了,大至的架构设计如下图用户通过Internet访问某个网站,经过DNS服务器解析,找到对应的服务器地址,请求服务器,响应用户请求的信息优点:1.部署...
2019-08-05 19:08:34 416
转载 canal demo搭建全记录
一、环境介绍canal是阿里开源的中间件,主要用于同步mysql数据库变更。具体参见:https://github.com/alibaba/canal/releases搭建环境:vmware centos7 部署mysql和canalwindows开发canal client,自动捕获mysql数据库变更二、Centos安装Mysql1、尝试用yum安装mysql...
2019-08-01 16:02:26 921
转载 number?keyword?傻傻分不清楚
上周,在某多多搬砖的一位朋友在微信上找我咨询,说他们公司一个ES集群从2.4升级到5.5以后,一个很简单的Query查询耗时突然从几十毫秒,变成800-1000毫秒,几十倍的性能下降!原始问题链接:# Why my search slow?这个查询非常简单,就是3个过滤条件求交集而已:{ "from": 0, "size": 10, "query": ...
2019-08-01 10:50:13 303
企业TT架构转型之道:阿里巴巴中台战略思想与架构实战
2024-08-08
修复版ajaxfileupload
2017-08-09
tomcat+redis实现session共享
2015-12-29
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人