一、流处理的江湖 二、Flink Vs Spark Spark介绍 Spark Streaming Structured Streaming 三、总结

文章目录背景一、Flink介绍二、应用场景1.事件驱动型应用2.数据分析应用3.数据管道应用三、特性总结 背景 一、Flink介绍 Apache Flink 是一个框架和分布式处理引擎，用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算 二、应用场景 1.事件驱动型应用 2.数据分析应用 3.数据管道应用 三、特性 批流一体化 精密的状态管理 事件时间支持 精确一次的状态一致性保障 总结 提示：这里对文章进行总结： 例如：以上就

Flink学习 第一章 Flink学习之Flink的诞生 文章目录Flink学习@[TOC](文章目录)一、Flink是什么？二、诞生背景1. Lambda架构2. Kappa架构3. Flink诞生总结 一、Flink是什么？ Apache Flink 是一个框架和分布式处理引擎，用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。 二、诞生背景 1. Lambda架构 HDFS和基于批量数据的计算系统（MapReduce 作业）很难

hadoop相关汇总介绍HDFS(Hadoop Distributed File System):HDFS架构（1.0）HDFS特性MapReduce体系结构（1.0）MapReduce特性YARN（Yet Another Resource Negotiator）YARN基本架构Hadoop2.x特性HDFS FederationNameNode HAHDFS快照通过NFSv3访问HDFShado...

hbase相关知识汇总介绍架构特性自动分区LSM-Tree自动合并高可靠读写过程写请求读请求2.0特性Region Replica读写链路 Off-heapIn Memory Compaction小对象存储 MOBAssignment MangerV2 介绍 HBase(Hadoop Database)，是一个基于 Google BigTable 论文设计的高可靠性、高性能、可伸缩的分布式存储系统...

hbase最佳实践HBase 适用场景rowkey设计建议 HBase 适用场景 不需要复杂查询的应用。HBase 原生只支持基于 RowKey 的索引，对于某些复杂查询（如模糊查询，多字段查询），HBase 可能需要全表扫描来获取结果。 写密集应用。HBase 是一个写快读慢（慢是相对的）的系统。HBase 是根据 Google 的 BigTable 设计的，典型应用就是不断插入新数据（如 Go...

zookeeper相关知识汇总介绍架构特性场景zookeeper在hdfs和hbase中的应用ZooKeepr在Hadoop中的应用主要有：ZooKeepr在HBase中的应用主要有说明 介绍 ZooKeeper 是一个分布式应用程序协调服务，是 Google 的 Chubby 一个开源的实现。 Zookeeper目标实现：provide a simple and high performance...