2017年12月_东境物语

12月 11月 10月 09月 08月 07月 06月 05月 03月 01月

转载使用scroll实现Elasticsearch数据遍历和深度分页

背景Elasticsearch 是一个实时的分布式搜索与分析引擎，被广泛用来做全文搜索、结构化搜索、分析。在使用过程中，有一些典型的使用场景，比如分页、遍历等。在使用关系型数据库中，我们被告知要注意甚至被明确禁止使用深度分页，同理，在 Elasticsearch 中，也应该尽量避免使用深度分页。这篇文章主要介绍 Elasticsearch 中使用分页的方式、Elasticsearch 搜索

2017-12-18 14:28:02 8175

原创 elasticsearch 5.x Delete By Query API（根据条件删除）

之前在 2.X版本里这个Delete By Query功能被去掉了因为官方认为会引发一些错误如需使用需要自己安装插件。bin/plugin install delete-by-query需要使用时DELETE /索引名/需要清空的type/_query{"query": {"match_all": {}}}那么在5.x版本中这个api又被官方重新加回自带功能...

2017-12-15 14:40:47 29381 7

原创 Java POI Excel读取

POI版本3.15pom文件<dependency> <groupId>org.apache.poi</groupId> <artifactId>poi</artifactId> <version>3.15</version></dependency><dependency&g...

2017-12-12 11:54:01 43277 13

原创 ES实时刷新与n秒刷新，压测性能耗损情况

ES压测机器配置： CPU：4核内存：8G一、10万数据1、50个线程（实时刷新，设置方法参考：http://blog.csdn.net/wwd0501/article/details/78316581）①创建索引后，默认1s更新耗时：131437ms(2分钟多) 丢索引情况：无丢失 CPU情况：100%左右内存使用情况：30%左右异常情况：无②

2017-12-07 10:11:47 13076 4

原创 eclipse不支持tomcat8.0版本解决

如果你要使用tomcat8.0+版本的tomcat容器，但是你安装的eclipse不支持，最多只支持到apache tomcat v7.0怎么办，我的解决办法如下：第一步：eclipse菜单help->eclipse marketplace 点击打开后界面如下：第二步：在find搜索框中输入：Eclipse JST Server Adapters ，点go搜索，正常搜索第一条就是，...

2017-12-07 09:56:09 20031 3

转载配置管理服务diamond和disconf横向对比

Diamond则是淘宝开源的一种分布式配置管理服务的实现disconf是来自百度的分布式配置管理平台,包括百度、滴滴出行、银联、网易、拉勾网、苏宁易购、顺丰科技等知名互联网公司正在使用!对比项目diamonddisconf配置存储存储在mysql上存储在mysql上推拉模型拉模型，每隔15s拉一次

2017-12-05 15:06:58 2139

转载 Elasticsearch与Solr 选型

搜索引擎选型调研文档Elasticsearch简介*Elasticsearch是一个实时的分布式搜索和分析引擎。它可以帮助你用前所未有的速度去处理大规模数据。它可以用于全文搜索，结构化搜索以及分析，当然你也可以将这三者进行组合。Elasticsearch是一个建立在全文搜索引擎 Apache Lucene™ 基础上的搜索引擎，可以说Lucene是当今最先进，最高效的

2017-12-05 14:36:27 225

本文以阿里巴巴为例，讲述了大型互联网应用的架构设计和演化。电子商务和支付等复杂商业系统在互联网上的运行，带来了高可用、海量、复杂三大挑战。阿里巴巴通过技术和组织架构的创新，成功应对了这些挑战。对于复杂业务系统的解耦，他们改进了传统技术，提出了一系列实用方案，既保证了解耦，又满足了高性能的需求。阿里巴巴的系统在全球分布式部署、99.999%以上的高可用、容灾等方面也进行了深入探索。他们不仅关注静态架构设计，还注重运行时的动态感知和管理能力，实现了业务的优雅降级和系统的高可用性。本文的价值在于它系统地总结了阿里巴巴的工程实践经验，并为未来的系统演进提供了参考。阿里巴巴的技术发展史是互联网技术架构实践与发展的缩影。从中可以学习到如何构建高效、可靠、安全和灵活的互联网应用。通过深入分析阿里巴巴的技术历程和解决方案，读者可以获得宝贵的见解，了解到在面对类似挑战时可能的路径和方法。总之，本文是一部值得推荐的著作，适合所有对大型互联网应用架构设计和演化感兴趣的读者。无论是技术人员还是管理者，都能从中获益。它不仅揭示了阿里巴巴的成功秘诀，也为整个行业的技术进步和创新提供了启示。

2024-08-08