![](https://img-blog.csdnimg.cn/20210805162533700.jpg?x-oss-process=image/resize,m_fixed,h_224,w_224)
数据开发bug
日常工作中遇到的bug总结
乌 啼
这个作者很懒,什么都没留下…
展开
-
spark-excel依赖的问题
最近需要使用Spark SQL清洗Excel的数据,在网上找到了spark-excel <dependency> <groupId>com.crealytics</groupId> <artifactId>spark-excel_2.12</artifactId> <version>0.13.7</version> <原创 2022-04-06 22:25:30 · 1272 阅读 · 1 评论 -
Hive堆内存溢出
报错: running beyondphysical memory limits.Current usage: 1.3 GB of 1.7 GBphysical memory used; 7.4 GB of 13.2 TB virtual memory used. Killing container。 解决方案 # 为MapReduce增大堆内存 set mpareduce.map.java.opts=-Xmx3072 -XX:++UseConcMarkSweepGC; set mapreduce.map原创 2021-08-09 10:32:50 · 608 阅读 · 0 评论