python import numpy无法_python-pyspark:ImportError:没有名为numpy的模块

我正在使用pyspark,并从以下代码获取结果rdd:

import numpy

model = PrefixSpan.train(input_rdd,minSupport=0.1)

result = model.freqSequences().filter(lambda x: (x.freq >= 50)).filter(lambda x: (len(x.sequence) >=2) ).cache()

当我使用input_rdd.take(5)检查时,input_rdd看起来不错.上面的代码创建了一个名为“结果”的rdd,其格式如下:

PythonRDD[103] at RDD at PythonRDD.scala:48

我确实已经安装了numpy,但是当我尝试执行result.take(5)或result.count()时,却不断出现以下错误.

Py4JJavaErrorTraceback (most recent call last)

in ()

----> 1 result.take(5)

/usr/local/spark-latest/python/pyspark/rdd.py in take(self, num)

1308

1309 p = range(partsScanned, min(partsScanned + numPartsToTry, totalParts))

-> 1310 res = self.context.runJob(self, takeUpToNumLeft, p)

1311

1312 items += res

/usr/local/spark-latest/python/pyspark/context.py in runJob(self, rd

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值