![](https://img-blog.csdnimg.cn/20201014180756754.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
文章平均质量分 87
菩提老鹰
这个作者很懒,什么都没留下…
展开
-
PySpark之Python版本如何选择(详细版)
通过Python爬虫抓取Spark和Python的所有版本清单,然后选择PySpark对应的Python版本时,Python的版本清单中, **按照python版本排序之后** 距离Spark版本的发布时间最近的Python版本,基本就是该Spark版本需要的最新的Python版本了;另外Spark2.1.0到2.4.8版本之间,最低要求是Python 3.4+;spark 3.0.0以上版本最低要求是Python 3.7+原创 2022-12-05 10:09:46 · 8404 阅读 · 0 评论 -
sqoop export导入任务失败但部分数据入库成功能问题
分析整理遇到的sqoop export导入,任务执行失败,但是实际数据库中对应表存在部分数据的问题原创 2022-10-08 18:14:24 · 945 阅读 · 0 评论