本文介绍了如何在PySpark环境中调用封装好的Scala算法Jar包。首先启动PySpark，然后加载数据，包括读取顶点和边的DataFrame，接着详细阐述了调用Jar包的过程，特别是包中的特定对象和方法，以及参数设置，如误差和迭代次数。最后，提到了后续的数据处理步骤，并提供了相关参考链接。
启动PySpark
pyspark2 --driver-class-path GDGraphX.jar --jars GDGraphX.jar
上述 GDGraphX.jar 为 封装好的 算法 Jar 包（基于 Spark 实现）
进入如下界面
Python 3.5.6 |Anaconda custom (64-bit)| (default, Aug 26 2018, 21:41:56)
[GCC 7.3.0] on linux
Type "help", "copyright", "credits" or "license" for more information.
Setting default log level to "WARN".
To adjust logging level use sc
最低0.47元/天 解锁文章
扫一扫
250
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
