![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Spark+Python
chnhbhndchngn
这个作者很懒,什么都没留下…
展开
-
pyspark在yarn上运行出现的问题
在yarn上运行使用Python编写的spark的任务代码原创 2022-09-07 18:14:44 · 1036 阅读 · 0 评论 -
一 使用Python 运行Spark的安装
过程主要分为五步: 安装 Anaconda 用 Anaconda 安装 Jupyter notebook 用 Anaconda 安装 PySpark 运行 Jupyter notebook 运行测试代码 其中1, 2, 4很简单, 使用python的朋友们应该都是会的, 这里不再赘述3 用 Anaconda 安装 PySparkpip install -U -i https://pypi.tuna.tsinghua.edu.cn/simple py原创 2020-06-08 19:03:52 · 451 阅读 · 3 评论