spark
从未停下脚步
这个作者很懒,什么都没留下…
展开
-
Failed to initialize compiler: object scala.runtime in compiler mirror not found
Failed to initialize compiler: object scala.runtime in compiler mirror not found.** Note that as of 2.8 scala does not assume use of the java classpath.** For the old behavior pass -usejavacp to s原创 2017-04-10 11:08:41 · 3196 阅读 · 0 评论 -
hadoop大数据平台手动搭建(六)-spark
Spark 是专为大规模数据处理而设计的快速通用的计算引擎。拥有Hadoop MapReduce所具有的优点;但不同于MapReduce的是Job中间输出结果可以保存在内存中,从而不再需要读写HDFS,因此Spark能更好地适用于数据挖掘与机器学习等需要迭代的MapReduce的算法。由于spark使用依赖scala.所以一起安装。 1.解压文件tar -zxvf /opt/spark原创 2017-03-31 14:09:43 · 447 阅读 · 0 评论