2018年04月_chenshiying007

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

原创 kafka storm 实战 (干货)

kafka storm 干货消息中间件kafka高可用集群安装Kafka管理工具介绍kafka：架构介绍1、Windows平台kafka环境的搭建2、windows平台监控KafkaOffsetMonitor Kafka3 kafka 基础4.Kafka消息处理5.Kafka集群维护6 kafka 集群监控7 消费者和生产者实例8 Kafka 核心源码剖析9 Kafka Server React...

2018-04-27 21:02:00 11523 1

原创 10 Kafka Partition Leader选主机制

Kafka Partition Leader选主机制更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记kafka storm 实战 (干货)一、概述大数据常用的选主机制常用选主机制的缺点Kafka Par...

2018-04-28 07:27:03 12422

原创 9 Kafka Server Reactor设计模型

Kafka Server Reactor设计模型更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记kafka storm 实战 (干货)一、概述二、Java NIO由以下几个核心部分组成 :Channel...

2018-04-28 07:25:55 1219

原创 8 Kafka 核心源码剖析

8 Kafka 核心源码剖析更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记kafka storm 实战 (干货)一、概述分区消费模式源码组消费模式源码两种消费模式服务器端源码对比同步发送模式源码介绍异...

2018-04-28 07:24:48 7341

原创 7 kafka 消费者和生产者实例

7 kafka消费者和生产者实例更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记一、概述二、例子代码地址https://github.com/csy512889371/learndemo/tree/ma...

2018-04-27 20:55:39 1618

原创 6 kafka 集群监控

6 kafka 集群监控更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记一、概述Kafka Offset MonitorKafka Manager在生产环境需要集群高可用，所以需要对Kafka集群进行监...

2018-04-26 15:56:37 1445

原创 5.Kafka集群维护

5.Kafka集群维护更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记一、概述二、Kafka集群基本信息实时查看和修改集群信息实时查看(topic工具)：列出集群当前所有可用的topic：bin/kaf...

2018-04-26 14:56:24 1519

原创 4.Kafka消息处理

4.Kafka消息处理更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述Kafka消息组织原理Kafka消息检索原理一、磁盘重认识1、当需要从磁盘读取数据时，要确定读的数据在哪个磁道，哪个扇区：首先必...

2018-04-26 11:15:04 2327

原创 3 kafka 基础

3 kafka 基础更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记一、概述二、Kafka使用背景在我们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样一些问题：** 我想分析一下用户行为（p...

2018-04-26 07:32:33 1350

原创分布式调度系统xxl-job

分布式调度系统xxl-job 搭建分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述github 地址 https://github.com/xuxueli/xxl-jobhttp://www.xuxueli...

2018-04-25 17:34:09 1742

原创 2、windows平台监控KafkaOffsetMonitor Kafka

windows平台监控KafkaOffsetMonitor Kafka分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记1.概述Kafka的一个监控系统——KafkaOffsetMonitor。KafkaOff...

2018-04-25 09:21:25 2018 1

原创 1、Windows平台kafka环境的搭建

Windows平台kafka环境的搭建分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1.安装Zookeeper参照 https://blog.csdn.net/qq_27384769/article/de...

2018-04-25 09:18:57 1277

原创视觉直观感受 7 种常用的排序算法

视觉直观感受 7 种常用的排序算法分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记1. 快速排序介绍：快速排序是由东尼·霍尔所发展的一种排序算法。在平均状况下，排序 n 个项目要Ο(n log n)次比较。在最...

2018-04-20 15:41:34 593

原创创建scrapy项目

创建scrapy项目分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述一、创建虚拟环境虚拟环境是python3mkvirtualenv article_spider二、安装scrapy(article_sp...

2018-04-20 15:03:06 2657

原创 python 安装配置及虚拟环境 for windows

python 安装配置 for windows分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记一、概述百度搜索 python for windowshttps://www.python.org/download...

2018-04-19 16:41:45 842

原创 windows 安装mysql

windows 安装mysql更多干货分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记一、下载百度搜索 mysql for windowshttps://dev.mysql.com/downloads/wind...

2018-04-19 11:52:05 182

原创 jmeter简单使用

jmeter简单使用分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记Jmeter的基本概念百度百科：Apache JMeter是Apache组织开发的基于Java的压力测试工具。用于对软件做压力测试，它最初被设...

2018-04-18 16:51:57 600

原创基础36 ElasticSearch Query DSL搜索语法

基础36 ElasticSearch Query DSL搜索语法分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、一个例子让你明白什么是Query DSLGET /_search{ "query...

2018-04-18 16:29:02 1123

原创基础35 ElasticSearch search api的基础语法

基础35 ElasticSearch search api的基础语法分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、search api的基本语法GET /_search{}GET /index1,...

2018-04-18 16:28:05 809

原创基础34 ElasticSearch mapping复杂数据类型以及object类型数据

基础34 ElasticSearch mapping复杂数据类型以及object类型数据分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、multivalue field{ "tags": [ "tag1...

2018-04-18 16:26:52 4785

原创 logstash 例子

logstash 例子分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、收集tomcat日志一使用 [ 作为日志切割 input { file { type => "es_error"...

2018-04-18 16:23:33 919

原创构建秒杀系统

构建秒杀系统分布式实战（干货） spring cloud 实战（干货） mybatis 实战（干货） spring boot 实战（干货） React 入门实战（干货）构建中小型互联网企业架构（干货） python 学习持续更新 ElasticSearch 笔记一、如何设计一个秒杀系统秒杀场景一般会在电商网站举行一些活动或者节假日在12306网站上抢票时遇到。对于电...

2018-04-18 16:21:44 2285 4

原创基础33 ElasticSearch 手动建立和修改mapping 及定制string类型数据是否分词

基础33 ElasticSearch 手动建立和修改mapping 及定制string类型数据是否分词分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、如何建立索引analyzednot_analyz...

2018-04-16 07:37:02 2311

原创基础32 ElasticSearch query string的分词

基础32 ElasticSearch query string的分词分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、query string分词query string必须以和index建立时相同的an...

2018-04-16 07:36:26 1661

原创基础31 ElasticSearch 分词器的内部组成

基础31 ElasticSearch 分词器的内部组成分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、什么是分词器切分词语，normalization（提升recall召回率）给你一段句子，然后将这段句...

2018-04-16 07:35:50 789

原创基础30 ElasticSearch 倒排索引核心

基础30 ElasticSearch 倒排索引核心分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述一、创建doc1：I really liked my small dogs, and I think my ...

2018-04-16 07:35:15 699

原创基础29 ElasticSearch 精确匹配与全文搜索的对比

基础28 ElasticSearch mapping分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记一、概述1、往es里面直接插入数据，es会自动建立索引，同时建立type以及对应的mapping2、mappi...

2018-04-16 07:33:41 3006

原创基础28 ElasticSearch mapping

2018-04-16 07:33:06 586

原创基础27 ElasticSearch query string search语法

基础27 ElasticSearch query string search语法分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、query string基础语法GET /test_index/test_...

2018-04-16 07:32:34 1869

原创基础26 ElasticSerach 分页及 deep paging 问题

基础26 ElasticSerach deep paging性能问题分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、讲解如何使用es进行分页搜索的语法size，fromGET /_search?size...

2018-04-16 07:31:58 606

原创基础25 ElasticSerach multi-index&multi-type搜索

基础25 ElasticSerach multi-index&multi-type搜索分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述multi-index和multi-type搜索模式告诉你如何一...

2018-04-16 07:31:17 510

原创 Logstash 读取tomcat错误日志

Logstash 读取tomcat错误日志分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述最近搭建了elk日志分析系统、想读取一下tomcat的错误日志、但是一个异常由于换行总是分多次存储展示、导致不是很清...

2018-04-16 07:30:14 5873

原创基础24 ElastciSearch search结果解析

24 ElastciSearch search结果解析分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、我们如果发出一个搜索请求的话，会拿到一堆搜索结果，本节课，我们来讲解一下，这个搜索结果里的各种数据，...

2018-04-15 09:19:10 842

原创基础23 ElastciSearch quorum机制

基础23 ElastciSearch quorum机制分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、consistencyone（primary shard），all（all shard），quoru...

2018-04-15 09:18:41 479

原创基础22 ElastciSearch document增删改内部原理

基础22 ElastciSearch document增删改内部原理分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述增删改内部原理1、客户端选择一个node发送请求过去，这个node就是coordinati...

2018-04-15 09:18:07 554

原创基础21 ElastciSearch document数据路由

基础21 ElastciSearch document数据路由分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1）document路由到shard上是什么意思？2）路由算法：shard = hash(rou...

2018-04-15 09:17:32 519

原创基础20 ElastciSearch 小结

基础20 ElastciSearch 小结分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、什么是distributed document storeElasticsearch在跑起来以后，其实起到的第一...

2018-04-15 09:16:54 668

原创基础19 ElasticSearch 上机动手实战演练bulk批量增删改

基础19 ElasticSearch 上机动手实战演练bulk批量增删改分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、bulk语法POST /_bulk{ "delete": { "_index":...

2018-04-15 09:16:23 1288 1

原创基础18 Elastic Search mget批量查询api

基础18 Elastic Search mget批量查询api分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记概述1、批量查询的好处就是一条一条的查询，比如说要查询100条数据，那么就要发送100次网络请求，这...

2018-04-15 09:15:43 832

原创 89 ElasticSearch Java API 基于地理位置搜索

89 ElasticSearch Java API 基于地理位置搜索分布式实战（干货）spring cloud 实战（干货）mybatis 实战（干货）spring boot 实战（干货）React 入门实战（干货）构建中小型互联网企业架构（干货）python 学习持续更新ElasticSearch 笔记代码<dependency> <groupId>org.loc...

2018-04-15 09:13:40 2588 2