![](https://img-blog.csdnimg.cn/20201014180756926.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hive
文章平均质量分 74
le0chang
这个作者很懒,什么都没留下…
展开
-
hive知识点记录
Hive的底层存储Hive的数据是存储在HDFS上的。Hive中的库和表可以看作是对HDFS上数据做的一个映射。所以Hive必须是运行在一个Hadoop集群上的。Hive语句的执行过程Hive中的执行器,是将最终要执行的MapReduce程序放到YARN上以一系列Job的方式去执行。Hive的元数据存储Hive的元数据是一般是存储在MySQL这种关系型数据库上的,Hive和MySQL之间通过MetaStore服务交互。Hive重要概念外部表和内部表内部表(managed table)默认创原创 2021-10-13 19:48:32 · 172 阅读 · 0 评论 -
hive安装使用
Hive介绍什么是hivehive是一个构建在hadoop上的数据仓库框架,是应facebook每天产生的海量新兴社会网络数据进行管理和(机器)学习的需求而产生和发展的,其设计目的是让精通sql技能但java编程技能较弱的分析师能够对facebook存放在hdfs中的大规模数据集执行查询。hive与传统数据仓库的区别传统数据仓库采用oracle或mysql等数据库搭建,其数据也是存储在这些数据库中;而hive是建立在hadoop的hdfs上的数据仓库基础框架,其数据存储在hdfs上,但其元数据(me原创 2021-10-13 15:06:37 · 204 阅读 · 0 评论 -
安装hadoop
LINUX 安装步骤参考 https://www.cnblogs.com/zingp/p/11223220.html注:1、start-dfs.sh 文件路径在hadoop解压目录下的etc/sbin下2、启动时提示localhost: ssh: connect to host localhost port 22: Connection refused安装SSH如果是端口不可用,修改/etc/hadoop/hadoop-env.shexport HADOOP_SSH_OPTS="-p原创 2021-10-11 17:24:29 · 209 阅读 · 0 评论