大数据
张虎宇
这个作者很懒,什么都没留下…
展开
-
storm执行流程和一些总结
Storm 执行详细过程storm总结转载 2018-09-19 11:16:46 · 812 阅读 · 0 评论 -
Spark集群环境搭建并测试
不在此处介绍spark了,直接上步骤, spark环境需要jdk 、Scala环境 、下载hadoop 和是spark,jdk的安装十分简单,下面介绍其他三个步骤。环境介绍三台虚拟机hadoop1 192.168.46.129 centos 2ghadoop2 192.168.46.128 centos 2ghadoop3 192.168.46.130 ...原创 2018-11-07 12:18:07 · 1120 阅读 · 0 评论 -
Windows使用Idea编译spark源码
目录 需要准备环境一、将源码导入IDEA二、进行build(编译)三、可能出现问题四、gitBash中进行编译五、进行自带例子测试需要准备环境jdk1.8.0scala 2.11maven 3.5.9pythonidea中安装了scala pluinGit一、将源码导入IDEA1、在idea中安装scala插件此处我已安装完成,请注意选择...原创 2018-11-19 20:27:47 · 3169 阅读 · 0 评论