集群介绍

ue12服务器包含

正式用 spark集群:  ue191(master)    ue192(worker)    ue193(worker)    ue194(worker)

每个节点的内存为10G，不够用的话可以再加

每个节点均有一个用户名为spark的账号

利用ssh连接   ssh  spark@192.168.0.191 或者 spark@ue191 (这里需要将192.168.0.200加进到DNS服务器列表  或者在/etc/hosts文件里添加对应ip-host 映射)

密码为123456

hadoop集群:   ue151(namenode)    ue152(datanode)  ue152(datanode)   ue153(datanode)

每个节点的内存为4G

用户名为hadoop2

利用ssh连接   ssh  hadoop2@192.168.0.151 或者 hadoop2@ue151 (这里需要将192.168.0.200加进到DNS服务器列表  或者在/etc/hosts文件里添加对应ip-host 映射)

密码为123456

ue13服务器包含

测试用   spark集群     ue181(master)    ue182(worker)   ue183(worker)  

每个节点的内存为10G，不够用的话可以再加

每个节点均有一个用户名为spark的账号

利用ssh连接   ssh  spark@192.168.0.181 或者 spark@ue181 (这里需要将192.168.0.200加进到DNS服务器列表  或者在/etc/hosts文件里添加对应ip-host 映射)

密码为123456

ue200 DNS服务器  与VPN服务器