- 博客(7)
- 收藏
- 关注
RSS订阅转载 虚拟机和主机互ping不通
前几天遇到了悲催的虚拟机和主机互ping不通的情况，在网上找了很长时间也没有发现有什么傻瓜方法，现在自己怎么解决的。1. 打开VMware workstation->Edit->Virtual Network Editor...->Restore Default2. 进入实体主机，以window7为例：开始->运行->在打开输入框中输入：cmd,然后回车->ipconfig (回车
2016-04-16 20:58:11
559
原创 spark内核架构
application = driver+executorDriver部分的代码：SparkConf+SparkContext---Driver代码部分：---val conf = new SparkConf()val sc = new SparkContext(conf)---------- end ------------executor部分代码
2016-03-29 14:33:50
268
原创 spark HA
1.解压zookeeper2.配置环境变量 //zookeeperhome path3.创建data logs 文件夹4.conf 创建zoo.cfg5.tata 创建myid修改 spark-env.sh 使用zookeeper管理export APARK_DAEMON_JAVA_OPTS="-Dspark.deploy.recoveryMode=ZOOKEE
2016-03-29 09:36:29
271
原创 spark
spartk弹性1.自动进行内存和磁盘直接的切换2.基于lineage的高效容错3.task如果失败会自动进行特定次数的重试，默认好像是4次4.stage如果失败会自动精选特定次数的重试，只计算失败的spartk
2016-03-26 07:29:56
211
原创 spark集群
不是root登录 ssh 命令行前加 sodo sudo passwd root 开启root 用户su root 切换为root用户登录1 、设置 IP 地址、网关1)可以使用默认vim /etc/network/interfaces # 编辑网网卡配置文件auto loiface lo inet loopbackauto eth0 # 开机自
2016-03-09 22:35:05
287
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人