- 博客(7)
- 收藏
- 关注
转载 Spark入门基础(1)——RDD【转】
RDD是存储数据的最小单位,spark在并行计算的时候会将任务细化到rdd的维度,分到不同的cluster上计算。生成RDD// @param numSlices number of partitions to divide the collection into// paralleli...
2017-11-23 15:29:00 153
转载 airflow安装与使用
1.安装环境 CentOS-6.5Python-2.7.12setuptools-29.0.1pip-9.0.1 2.编译Python sudo yum install -y gccsudo yum install -y gcc-c++sudo yum install -y w...
2016-09-26 20:17:00 693
转载 CentOS 6.5 gcc升级到4.8
1.下载源码包 wget http://ftp.gnu.org/gnu/gcc/gcc-4.8.0/gcc-4.8.0.tar.bz2tar -jxvf gcc-4.8.0.tar.bz2 2.下载编译所需依赖库 cd gcc-4.8.0./contrib/download_pre...
2016-09-22 16:00:00 85
转载 Centos修改yum源
1.备份/etc/yum.repos.d/CentOS-Base.repo mv /etc/yum.repos.d/CentOS-Base.repo /etc/yum.repos.d/CentOS-Base.repo.backup 2.下载对应版本repo文件, 放入/etc/yum.re...
2016-09-21 15:47:00 73
转载 Linux常用软件包
1.rz命令 sudo yum install lrzsz -y 2.ntp命令 # http://blog.csdn.net/scorpio3k/article/details/49645219yum install -y ntp ...
2016-09-20 10:17:00 777
转载 hbase常用shell命令
1.创建表 #创建表test 表中包含三列 c1, c2, c3create 'test', 'c1', 'c2', 'c3' 转载于:https://my.oschina.ne...
2016-07-27 18:36:00 97
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人