hive
文章平均质量分 85
wenqingCoder
这个作者很懒,什么都没留下…
展开
-
hive set 参数设置
查询 【行转列功能】 -- 打印列名 set hive.cli.print.header=true; -- 开启行转列功能, 前提必须开启打印列名功能 set hive.cli.print.row.to.vertical=true; -- 设置每行显示的列数 set hive.cli.print.row.to.vertical.num=1; -- 显示当前数据库 set hive.cli.print.current.db=true; 动态分区 -- 开启动态分区 set hive.exec.dynamic原创 2021-03-01 11:34:26 · 1023 阅读 · 0 评论 -
HIVE数据仓库设计
一、目的 将各业务部门的日志及必要的业务数据收集到大数据集群,以便进行统一的清洗规整、统计、建模,最终为公司管理层、业务部门提供经营分析、指标监控、推荐服务、公关数据等方面的能力支撑。 二、设计原则 1、合理: 包括:规则合理、数据分层合理、流程合理。 数仓越来越规范化,易于后续快速入手,保证数据的完整及安全,数据逻辑易修改。 2、可控: 包括:数据安全可控、问题定位可控 3、迭代优化: 可持续优化 三、数据分层 分层 说明 ..原创 2020-12-09 14:41:14 · 1146 阅读 · 0 评论 -
mysql表自动导入hive脚本-01自动hive建表
1.创建mysql表保存mysql以及hive的配置信息 此配置信息表字段包括但不限于以下字段 create table `t_auto_mysql2hive_info` ( `id` int UNSIGNED AUTO_INCREMENT PRIMARY KEY COMMENT '自增id', `author` varchar(64) NOT NULL DEFAULT '' ...原创 2019-08-27 12:08:43 · 1500 阅读 · 0 评论