- 博客(4)
- 收藏
- 关注
RSS订阅原创 SPARK启动历史任务查看
SPARK历史任务查看需要一下配置: 修改spark-defaults.conf配置文件 spark.eventLog.enabled true spark.eventLog.dir hdfs://192.168.9.110:9000/eventLogs spark.even...
2016-06-27 12:13:23
573
原创 SPARK动态添加节点
spark集群使用hadoop用户运行,集群机器如下:1DEV-HADOOP-01192.168.9.110Master2DEV-HADOOP-02192.168.9.111Worker3DEV-HADOOP-03192.168.9.112Worker 现在需要添加一台192.168.9.113 机器名DEV-HADOOP-...
2016-06-27 12:12:20
584
原创 SPARK standlone安装配置
集群一共有3台机器,集群使用hadoop用户运行,3台机器如下:1DEV-HADOOP-01192.168.9.1102DEV-HADOOP-02192.168.9.1113DEV-HADOOP-03192.168.9.112 配置集群间hadoop用户的无密码登录配置每台机器的/etc/hosts安装JD...
2016-06-27 12:11:34
141
HADOOP/HBase动态新增节点
1. 检查JDK版本是否相同并拷贝JDK，并配置/etc/profile文件的JAVA_HOME和CLASSPATH属性2. 配置/etc/hosts文件，新增新加机器的计算机名，包括原有机器和新增机器都要修改该文件3. 拷贝hadoop-2.6.0和hbase-1.0.1.1，并把hadoop-2.6.0和hbase-1.0.1.1文件夹的文件所有者和文件所属组改成hadoop4....
2016-06-06 16:53:28
179
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人