知识源于积累,登峰造极源于自律. 整理自己发在博客上的大数据笔记,方便查找。索引持续更新中…
注意: 黑猫的旁边是文章的目录哦~~
大数据开发(基础笔记)
Linux
shell
Hadoop
hadoop组成模块之mapreduce的MapTask机制和reduceTask机制
YARN调度器【capacity-scheduler.xml】默认配置
kafka2.1
Kafka3.0.0
Zookeeper
Hive
Spark
Streamx
Flink
Flink使用idea将匿名内部类替换为lambda表达会擦除泛型
Flink 原理与实现: Flink核心概念之TaskManger与Slots
Flink 原理与实现: Flink核心概念之执行图(ExecutionGraph)
Flink 原理与实现: Flink核心概念之并行度(Parallelism)
Flink 原理与实现: Flink中的Window API
Flink 原理与实现: Flink 的时间语义与Wartermark(水位线)机制
Flink 原理与实现: Flink的ProcessFunction API(底层API)
Flink 原理与实现: Flink的状态编程和容错机制之算子状态和键控状态
Flink 原理与实现: Flink的状态编程和容错机制之状态一致性
Flink 原理与实现: Flink的状态编程和容错机制之检查点(checkpoint)
Flink 原理与实现: Flink+Kafka如何实现端到端的exactly-once语义
Flink 原理与实现: Flink实现UDF函数——更细粒度的控制流
Flink 原理与实现: Flink流计算常用算子(Flink算子大全)
Flink源码分析: Flink on yarn 的 per-job-cluster模式及提交流程
Flink SQL
Flink 原理与实现: FlinkSQL的Table API 与SQL概念
Flink 原理与实现: FlinkSQL的Table API 与SQL之流处理中的特殊概念
Flink 原理与实现: FlinkSQL的Table API 与SQL之窗口(Windows)
Flink 原理与实现: FlinkSQL的Table API 与SQL之函数(Functions)
Flink SQL 代码案例
Flink SQL 案例代码: 将Stream流转化成Table
Flink SQL 案例代码: 将Stream流转化成Table聚合操作, 求总和,某个count或者sum将转为Stream打印
Flink SQL 案例代码: 使用Connect方式读取文本数据
Flink SQL 案例代码: 使用连接器的方式读取Kafka的数据