大数据
王珂_wangke
开开心心搬砖, 高高兴兴挣钱
展开
-
Flink-CDC 关闭初始化读表锁, DDL 锁 Schema 锁, 使用增量或者全量或者指定偏移量
Snapshot step 3 的时候会进行锁表,Snapshot step 7 的时候读全量表。Snapshot step 6 的时候会锁库。原创 2023-02-24 18:19:58 · 1725 阅读 · 1 评论 -
(1)Hadoop 的第一个程序 WordCount 理解
Hadoop 的第一个程序 WordCount 理解 map and Reduce 相关概念 Map map 负责将自己区块数据, 做简单拆分, 成一个map, 这个map 是不去重的, 会在map 后面最加值, 让数据分组 比如两个 机器的两个map machine1: # 以下数据是machine1 hdfs 区块的数据 hello hello hello // 这是machine 1 的 context [ {"hello" : 1}, {"hello" : 1}, {"hello原创 2021-02-24 15:08:22 · 111 阅读 · 0 评论