![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
ErrorMaker...
这个作者很懒,什么都没留下…
展开
-
sparkSQL的一些操作
修改列类型:df.withColumn('price',df.price.cast(IntegerType()))原创 2021-07-08 17:23:17 · 73 阅读 · 0 评论 -
linux中运行spark报错
出现报错:JAVA_HOME is not set或者Exception: Java gateway process exited before sending its port number解决办法:插入下面语句import osos.environ['JAVA_HOME'] = '/usr/lib/jvm/jdk1.8.0_162'# 指向的是jdk的存储路径原创 2021-06-08 20:15:06 · 245 阅读 · 0 评论 -
linux中用jupyter notebook加载pyspark
问题:no module named pyspark 或者 no module name py4j解决办法:1.shell中pip install findspark2.调用pyspark之前先指向spark的路径原创 2021-05-31 23:51:59 · 475 阅读 · 2 评论