大数据
文章平均质量分 63
吱吱不倦小子
学人之所学,成人之所成。(学习内容来源网上整理,如有侵权,请联系我删除。)
展开
-
hive:排序问题
一.hive排序以及对比排序名称 reducer个数 说明 全局排序(order by) 1个 内部排序(sort by) 多个 Sort by 为每个 reducer 产生一个排序文件。每个 Reducer 内部进行排序,对全局结果集 来说不是排序。 分区排序(Distribute By) 一定要分配多 reduce 进行处理 在有些情况下,我们需要控制某个特定行应该到哪个 reducer原创 2021-12-12 23:28:40 · 1101 阅读 · 0 评论 -
hive:join连接
一,Join连接方式介绍SQL join 用于把来自两个或多个表的行结合起来。下图展示了 LEFT JOIN、RIGHT JOIN、INNER JOIN、OUTER JOIN 相关的 7 种用法。二.数据准备1.模拟数据emp表7369 SMITH CLERK 7902 1980-12-17 800.00 207499 ALLEN SALESMAN 7698 1981-2-20 1600.00 300.00 307521 WARD SALESMAN 7698 1981原创 2021-12-12 15:22:28 · 2034 阅读 · 0 评论 -
hive:DDL 之表
4.5 创建表1)建表语法 CREATE [EXTERNAL] TABLE [IF NOT EXISTS] table_name[(col_name data_type [COMMENT col_comment], ...)][COMMENT table_comment][PARTITIONED BY (col_name data_type [COMMENT col_comment], ...)][CLUSTERED BY (col_name, col_name, ...)[SOR原创 2021-12-08 00:29:00 · 654 阅读 · 0 评论 -
hive:DDL 之数据库
4.1 创建数据库CREATE DATABASE [IF NOT EXISTS] database_name[COMMENT database_comment][LOCATION hdfs_path][WITH DBPROPERTIES (property_name=property_value, ...)];1)创建一个数据库,数据库在 HDFS 上的默认存储路径是/user/hive/warehouse/*.db。hive (default)> create databa原创 2021-12-07 23:44:49 · 224 阅读 · 0 评论 -
hive启动beeline报org.apache.hadoop.security.authorize.AuthorizationException
解决办法:1.在hive-site.xml中配置<property> <name>hive.metastore.sasl.enabled</name> <value>false</value> <description>If true, the metastore Thrift interface will be secured with SASL. Clients must authenticate with K原创 2021-11-25 00:17:30 · 2969 阅读 · 0 评论