- 博客(3)
- 资源 (1)
- 收藏
- 关注
原创 Hive的优化
Hive的优化1、Fetch的抓取当set hive.fetch.task.conversion=none;简单查询会转化为Mapreduce程序,查询较慢当set hive.fetch.task.conversion=more;简单查询不会转化为Mapreduce程序,查询较快2、本地模式计算任务在提交任务的节点上(本地)执行,不会提交到yarn在少量数据的前提下,开启本地模式,Mapreduce任务不提交到Yarn,任务不提交到Yarn,任务的执行省去了Yarn的调度时间,可以加快查询效率
2020-11-25 20:39:43 352 1
原创 SpingBoot运行测试报java.sql.SQLException: The server time zone value ‘�й���ʱ��‘ is unrecognized or repre
运行测试类第一种解决办法:不加版本号或者版本号为6以上,解决方式:在连接数据库的配置文件中加上以下,时区亚洲/上海 url: jdbc:mysql://localhost:3306/crm_ssmdb?useUnicode=true&characterEncoding=UTF-8&serverTimezone=Asia/Shanghai第二种解决办法:加上版本号5.1.47,如果加上版本号6.0.6也不行,可能是因为版本太高<dependency> &
2020-11-19 18:17:45 121
原创 在Hive中做修复分区时报FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask
Hive做分区修复出现FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask可能是在创建分区时未添加数据模拟分区修复第一步 选择一个分区路径(与hive建表的路径相同)第二步手动在hadoop中创建分区在Hive中查看分区(新建分区并不在Hive中)因为Hive的分区是对元数据的分区自动恢复分区(msck repair table *)手动恢复分区(alter table s
2020-11-18 20:30:10 4286 2
ssh软件安装(虚拟机指令)
2020-09-29
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人