- 博客(6)
- 收藏
- 关注
原创 基于docker搭建跨主机的spark集群并配置notebook(二)
上一篇文章制作好了docker镜像,现在在两台服务器上部署spark集群 宿主机1IP:192.168.0.21 ;宿主机2IP:192.168.0.30 (一)在宿主机安装weave,使不同宿主机的容器之间能够互相通信 参考: Docker学习笔记 — Weave实现跨主机容器互联 (二)实现宿主机1到宿主机2的ssh免密登录 参考: CentOS下SSH无密码登录的配置 (三)
2017-03-06 15:31:38 1564
原创 基于docker搭建跨主机的spark集群并配置notebook(一)
一、制作docker镜像 知识水平尚有欠缺,对于dockerfile那一套理论也不熟悉,所以采取的制作一个docker镜像作为启动集群的载体: (一)在宿主机安装docker: 不同的系统安装docker的方法
2017-03-06 14:05:06 1972
原创 ubuntu 14.04 Spark单机环境搭建与实例使用
一.java环境 下载jdk安装包解压进入/opt/目录 设置环境变量 $gedit /etc/profile 在最后添加 export JAVA_HOME=/opt/jdk1.8.0_60 export JRE_HOME=${JAVA_HOME}/jre export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib export PAT
2016-03-04 15:52:25 1066
转载 vs 2010链接到Mysql数据库
一.准备工作 1.下载Mysql的Connecter :connector c/c++,含有include和lib两个文件夹 ; 2.新建一个vc++ 空项目;解决方案平台 win 64 3.项目属性->"C/C++"->常规,在“附加包含目录”中 将"include"及"include\cppconn"的路径包含进来。 4.若在debug下,属性->配置属性->链接器->常规,在“附
2015-12-06 20:25:17 2600
原创 安装mongoDB
1.下载msi64位 2.custom安装(kb2731284补丁) 3.在data文件夹下创建db,log文件夹 4.切换到D:\MongoDB\Server\3.0\bin 目录执行如下命令: mongod --dbpath D:\MongoDB\Server\3.0\data\db 执行完如下图 5. mongodb安装成windows 服务 在D:\MongoDB\Serv
2015-12-06 20:21:14 298
原创 关于在Ubuntu下安装nodejs以及使用addons API的一系列命令。
一.Ubuntu下安装nodejs # apt-get update # apt-get install -y python-software-properties software-properties-common # add-apt-repository ppa:chris-lea/node.js # apt-get update
2015-12-02 12:42:14 362
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人