![](https://img-blog.csdnimg.cn/0a6542adc3bf42569a09ae7d01eef1f9.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据之路
文章平均质量分 89
大数据学习应用
C0oOder
The more you learn, the more ignorant you become
展开
-
Flink 学习十 FlinkSQL
flinksql 从入门到入门...原创 2023-06-20 23:15:23 · 9967 阅读 · 0 评论 -
Flink 学习九 Flink 程序分布式运行部署
flink 集群运行介绍,集群部署原创 2023-06-20 23:07:29 · 1255 阅读 · 0 评论 -
Flink 学习八 Flink 容错机制 & checkpoint & savepoint
flink checkpoint savepoint 基础概念和使用原创 2023-06-20 23:01:54 · 2340 阅读 · 0 评论 -
Flink 学习七 Flink 状态(flink state)
flink 中的状态,状态后端介绍,使用原创 2023-06-20 22:53:57 · 2097 阅读 · 0 评论 -
Flink 学习六 Flink 窗口计算API
窗口 window计算api 介绍原创 2023-06-20 22:48:05 · 1583 阅读 · 0 评论 -
Flink 学习五 Flink 时间语义
flink 里面的时间语义,相关基础概念的解释,waternark 的基础原理原创 2023-06-20 22:41:08 · 1717 阅读 · 0 评论 -
Flink 学习三 Flink 流 & process function API
基础流操作,以及相关的processFunction基础概念和使用原创 2023-06-20 22:15:46 · 1452 阅读 · 0 评论 -
Flink 学习二 Flink 编程基础API
flink 的入门代码;介绍source ,sink transformation 等算子的基础概念和用法原创 2023-06-20 21:58:58 · 2278 阅读 · 0 评论 -
Flink 学习四 Flink 基础架构
flink运行的架构,组件; &&flink算子链与槽位的基础概念和相关API原创 2023-06-20 22:36:24 · 1854 阅读 · 0 评论 -
Flink 学习一 Flink 简介
flink 基础概念,基本架构的结束原创 2023-06-20 21:53:37 · 1518 阅读 · 0 评论 -
Sqoop学习
主要版本Sqoop1 和 Sqoop2 两个版本总结就是2版本不好用于生产;Sqoop 是一款开源工具,主要用于Hadoop (Hive) 数据和传统数据库(mysql ,postgresql)数据传递;可以把传统数据库数据转换到Hadoop HDFS 中,也可以把HDFS 数据导入到关系型数据库中;:起于2009 ,起初作为Hadoop 的第三方模块,后来为了方便部署和快速迭代,Sqoop独立出来作为apache 的项目;目前。原创 2022-11-04 00:58:57 · 1032 阅读 · 0 评论 -
Hadoop (一) Hadoop学习
HADOOP 学习原创 2022-07-18 14:07:49 · 2832 阅读 · 0 评论 -
序列化技术ProtoBuf
把对象内容转化成数据流;与之对应的就是反序列化:从数据流中读取数据,然后重新转换成对象;序列化反序列化往往是遵循一定的格式来操作的;常见的序列化有:把对象转成XML,JSON,二进制流特点XMLJSONProtoBuf数据结构复杂简答较复杂保存方式文本文本二进制保存大小大一般小解析速度慢一般快语言支持多多C/Java/py开发难易麻烦简答简答。...原创 2022-08-09 23:13:44 · 258 阅读 · 0 评论 -
大数据开发之Apache Hive
ApacheHive是一款建立在hadoop生态之上的开源数据仓库系统,可以把储存在Hadoop文件中结构化,半结构化得到数据文件映射成一张数据库表,然后基于数据库表提供一种类似SQL的查询模型,也叫Hive查询语言,简称HQL;然后是Hive的核心就是把HQL转化成MapReduce程序,然后把转化后的MapReduce程序提交到Hadoop集群执行作为一款数据仓库软件,最起码要有这个数据存储和数据分析的能力;Hive借助hadoop来实现。.........原创 2022-07-31 20:03:05 · 472 阅读 · 0 评论 -
大数据开发之数据仓库
数仓原创 2022-07-30 22:54:41 · 801 阅读 · 0 评论