Hadoop生态
文章平均质量分 94
beTree_fc
还行吧
展开
-
Hadoop 基础知识汇总
数据来源: 网络资源/《Hadoop权威指南》 hadoop i/o 操作: 1.数据完整性: datanode在接收到数据的时候会校验数据完整性,比如CRC-32,datanode在接受client数据或者复制其他datanode的数据时会验证数据完整性。 正在写数据的client会将数据和校验和发送到datanode管线,最后一个datanode来负责校验数据完整性 clien...原创 2018-07-21 09:39:14 · 354 阅读 · 0 评论 -
Hive 基础知识汇总
安装: 安装hive 注意跟Hadoop或者spark版本的对应问题 命令行变量 --hivevar key=value ,可以允许用户在命令行中声明变量,在hive脚本中使用,该变量声明之后,会放置到hivevar变量空间,下面给出hive中所有的命名空间,查看命名空间变量,在hive脚本中,使用set;会打印出所有命名空间的变量。 Hive 一次性命...原创 2018-08-01 16:28:53 · 1953 阅读 · 0 评论 -
Hadoop 面试汇总
原作者:https://blog.csdn.net/bingoxubin 原博客:https://blog.csdn.net/bingoxubin/article/details/79072945 1.Hadoop集群可以运行的3个模式? 单机(本地)模式 伪分布式模式 全分布式模式 2.单机(本地)模式中的注意点? 在单机模式(standalone)中不会存在守护进程,所有东西都运行...转载 2018-08-01 17:11:01 · 264 阅读 · 0 评论