![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 91
0o小禹o0
这个作者很懒,什么都没留下…
展开
-
ElasticSearch学习笔记
文章目录一、ElasticSearch是什么二、ElasticSearch可以用来做什么三、ES核心概念1. 面向文档的ES2.物理设计3.逻辑设计四、分片和副本1.分片2.副本3.脑裂问题五、分布式文档1.路由2.文档的写操作3.搜索文档(单个文档)的过程4.全文搜索一、ElasticSearch是什么Elasticsearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。二、ElasticSearch可以用来做什么搜索分析原创 2021-03-12 10:25:50 · 121 阅读 · 0 评论 -
HBase学习笔记
文章目录一、HBase是什么二、HBase逻辑结构三、HBase物理结构-store的存储方式四、HBase数据模型五、HBase基础架构六、HBase详细架构七、HBase数据流程1.写流程2.读流程一、HBase是什么一种分布式、可扩展、支持海量数据存储的 NoSQL 数据库二、HBase逻辑结构Row Key为字典序排列Region为横向切分的分片,图中有3个Regionstore是真正要存的东西,图中有6块,他们才是存储在文件中的三、HBase物理结构-store的存储方式原创 2021-03-09 09:18:37 · 133 阅读 · 1 评论 -
Kafka学习笔记整理
文章目录一、Kafka概述二、Kafka基础架构三、Kafka文件存储一、Kafka概述分布式发布订阅消息系统,和消息系统类似,属于消息中间件。通俗的感受一下:eg:妈妈:生产者你:消费者馒头:数据流、消息 正常情况下: 生产一个,消费一个 其他情况: 一直生产,你吃到某一个馒头时,你卡住了(机器故障),馒头就丢了(数据丢失) 一直生产,做馒头速度快,你吃不及,馒头也就丢失了 拿个碗/篮子,馒头做好以后先放到篮子里,你要吃的时候去篮子里面取出来吃篮子/碗: Kafka 当原创 2021-03-06 17:39:55 · 108 阅读 · 1 评论 -
Flink的架构理解和相关扩展
文章目录前言一、Flink是什么?二、Flink的优势是什么?1.高吞吐、低延迟、高性能2.支持事件时间概念3.支持有状态计算4.支持高度灵活的窗口(Window)操作5.基于轻量级分布式快照(CheckPoint)实现的容错6.基于JVM实现独立的内存管理7.Save Point(保存点)三、Flink的应用场景1.事件驱动典型的事件驱动类应用2.数据分析3.管道式ETL四、Flink的内部分析1.Flink架构1.Flink集群剖析2.Tasks和算子链3.Task Slots 和资源总结2.水印wat原创 2021-02-19 16:08:38 · 399 阅读 · 0 评论