spark
王亨
这个作者很懒,什么都没留下…
展开
-
Rstudio连接spark失败
在cmd下输入:spark-shell可以连接到spark,但在rstudio里面使用 sc <- spark_connect(master = "local")连接报错。这种情况是权限不足。解决办法:关闭 rstudio,重新以管理员身份打开重新连接即可。...原创 2018-04-18 15:04:55 · 1326 阅读 · 2 评论 -
初识sparklyr—电影数据分析
这篇文章是初次使用sparklyr扩展包来进行一些数据分析,对Spark牵扯不是很多。使用的数据是movieLens 100k,这份数据包含943个用户对1680部电影的评分数据,如需获取数据请在文末点击阅读原文。准备工作#安装sparklyr包install.packages("sparklyr")library(sparklyr)library(dplyr)sc <- spark_co...原创 2018-04-25 13:47:00 · 1089 阅读 · 0 评论