spark
关注
分享
扫一扫
ErrorMaker...
这个作者很懒，什么都没留下…
展开
-
sparkSQL的一些操作
修改列类型：df.withColumn('price',df.price.cast(IntegerType()))原创 2021-07-08 17:23:17 · 85 阅读 · 0 评论 -
linux中运行spark报错
出现报错：JAVA_HOME is not set或者Exception: Java gateway process exited before sending its port number解决办法：插入下面语句import osos.environ['JAVA_HOME'] = '/usr/lib/jvm/jdk1.8.0_162'# 指向的是jdk的存储路径原创 2021-06-08 20:15:06 · 256 阅读 · 0 评论 -
linux中用jupyter notebook加载pyspark
问题：no module named pyspark 或者 no module name py4j解决办法：1.shell中pip install findspark2.调用pyspark之前先指向spark的路径原创 2021-05-31 23:51:59 · 507 阅读 · 2 评论