spark
晨曦下的凯
这个作者很懒,什么都没留下…
展开
-
Spark2.1.0分布式集群安装
一、依赖文件安装 1.1 JDK 参见博文:http://www.cnblogs.com/liugh/p/6623530.html 1.2 Hadoop 参见博文:http://www.cnblogs.com/liugh/p/6624872.html 1.3 Scala 参见博文:ht转载 2017-05-14 23:13:20 · 470 阅读 · 0 评论 -
IntelliJ IDEA(Community版本)的下载、安装和WordCount的初步使用(本地模式和集群模式)
不多说,直接上干货! 对于初学者来说,建议你先玩玩这个免费的社区版,但是,一段时间,还是去玩专业版吧,这个很简单哈,学聪明点,去搞到途径激活!可以看我的博客。 包括: IntelliJ IDEA(Community)的下载 IntelliJ IDEA(Community)的安装 IntelliJ IDEA(Commu转载 2017-05-15 00:49:12 · 1381 阅读 · 0 评论 -
spark-submit提交任务到集群-案例
1.参数选取当我们的代码写完,打好jar,就可以通过bin/spark-submit 提交到集群,命令如下:./bin/spark-submit \ --class class> --master \ --deploy-mode \ --conf = \ ... # other options \ [application-argument转载 2017-05-15 20:42:51 · 2689 阅读 · 0 评论