- yarn 总体上仍是master / slave结构,其中master一般指的是resourceManager
- zookeeper中leader的消息类型有
ping request ack - 标准的数据仓库一般分为三层
源数据层(ODS) 数据应用层(DA) 数据层库(DW) - hive 和hadoop之间的关系
hive利用HDFS存储数据,利用MapReduce查询分析数据 - hive定义一个自定义函数类时,需要继承 UDF 类
- hive是建立在hadoop之上的数据仓库
- 文件管理大的时候,我们经常用到文件服务器,常见的文件服务有
ftp 文件服务 Samba文件服务 nfs 文件服务 - hive 的数据存储方式只有 HDFS
- hive的元数据默认采用 derby 数据库
理论
最新推荐文章于 2022-08-09 10:32:20 发布