![](https://img-blog.csdnimg.cn/20190918140037908.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
项目经验 # bug
文章平均质量分 62
一直以来学习工作过程中遇到的bug
Long.JK
这个作者很懒,什么都没留下…
展开
-
Hive insert select导入报错 HiveException: Hive Runtime Error while processing row{#数据内容}
文章目录运行环境执行脚本错误如下解决过程总结运行环境hadoop 2.7.2电脑虚拟机 hadoop102 hadoop103 hadoop104执行脚本sql="set hive.exec.dynamic.partition =true;set hive.exec.dynamic.partition.mode=nonstrict;use $APP;insert overwrite table t_dwd_edata_day partition(pt_day)select原创 2021-04-12 11:22:31 · 1867 阅读 · 0 评论 -
大数据学习之问题解决+经验+调优方法整理(持续更新)
文章目录1 Hadoop1.1 MapReduce执行速度过慢1.2 Yarn节点负载不均衡1.3 Yarn节点上任务数太多,资源利用率太高1.4 Hdfs参数调优1.5 目录配置1.6 Hadoop宕机(项目遇到)2 HBase2.1 优化方法3 Hive3.1 Hive数据倾斜3.2 Tez引擎4 Mysql4.1mysql utf-8 超过字节数5 Redis5.1 缓存穿透、缓存雪崩、缓存...原创 2020-03-20 16:58:34 · 960 阅读 · 0 评论 -
Hive使用Tez引擎时被NodeManager杀死进程问题
运行Tez时检查到用过多内存而被NodeManager杀死进程问题:Caused by: org.apache.tez.dag.api.SessionNotRunning: TezSession has already shutdown. Application application_1546781144082_0005 failed 2 times due to AM Container ...原创 2020-03-06 15:39:43 · 671 阅读 · 0 评论 -
zk集群不能通过ssh脚本群起问题
linux群起群闭脚本没用 ssh没用感觉是公钥私钥出了问题,创建完不xsync就还好,分配之后就没用了我也不晓得为什么但是不分配就好原创 2020-01-18 23:56:04 · 205 阅读 · 0 评论