hive
文章平均质量分 92
白桃気泡水-
这个作者很懒,什么都没留下…
展开
-
Spark-SQL连接Hive 的五种方法
因为 Spark Thrift Server 的接口和协议都和 HiveServer2 完全一致,因此我们部署好 Spark Thrift Server 后,可以直接使用 hive 的 beeline 访问 Spark Thrift Server 执行相关语句。Spark Thrift Server 的目的也只是取代 HiveServer2,因此它依旧可以和 Hive Metastore进行交互,获取到 hive 的元数据。如果使用 Spark 内嵌的 Hive, 则什么都不用做, 直接使用即可。原创 2022-12-11 20:12:53 · 233 阅读 · 1 评论 -
Hive整合Hbase
Hive-2.3.3Hive与HBase整合的实现是利用两者本身对外的API接口互相通信来完成的,其具体工作交由Hive的lib目录中的hive-hbase-handler-*.jar工具类来实现2、应用场景将ETL操作的数据存入HBase。原创 2022-11-04 19:07:06 · 598 阅读 · 0 评论 -
hive对数据库及表的操作
hive对数据库及表的操作原创 2022-10-21 10:03:00 · 1175 阅读 · 0 评论 -
Hive的函数
为了方便开发人员使用函数,Hive提供了大量的内置函数,包括数学函数,集合函数,类型转换函数,条件函数,字符函数,聚合函数,表生成函数,日期函数原创 2022-10-20 11:13:58 · 635 阅读 · 0 评论 -
Hive安装与配置及常见问题解决
hive是基于Hadoop构建的一套数据仓库分析系统,它提供了丰富的SQL查询方式来分析存储在Hadoop分布式文件系统中的数据:可以将结构化的数据文件映射为一张数据库表,并提供完整的SQL查询功能;可以将SQL语句转换为MapReduce任务运行,通过自己的SQL查询分析需要的内容,这套SQL简称Hive SQL,使不熟悉mapreduce的用户可以很方便地利用SQL语言查询、汇总和分析数据。而mapreduce开发人员可以把自己写的mapper和reducer作为插件来支持hive做更复杂的数据分析。原创 2022-10-14 10:33:33 · 1030 阅读 · 0 评论