- 博客(5)
- 收藏
- 关注
RSS订阅原创 sparkSQL读取数据的方法
本文中所有数据以本地数据为数据源1、读取json文件object ReadJson { def main(args: Array[String]): Unit = { val spark = SparkSession.builder().appName("testpeople").master("local") .getOrCreate() import ...
2018-07-27 17:15:47
8897
原创 datax源码分析（一）
这里，对datax源码进行粗略的分析。首先查看datax的启动文件--datax.py，这是一个Python文件，从main开始分析：首先，给定一个datax的启动命令，demo差不多是这样：python ./datax.py -p \"-Dodsjdbc='jdbc:mysql://xxx:3306/data_ods' \-Dodsuser='ware' \-Dodspwd='ware' \-D...
2018-04-03 15:56:20
6741
原创 pyCharm和Django的安装问题
网上类似的安装攻略很多，基本也比较全，今天碰到的最大的坑就是Django在pycharm上的实现问题。若想实现在pycharm上安装Django，切记一定要记得安装pycharm的专业版，社区版虽然免费的，但是，没有Django的选项.....坑了一个下午在社区版上瞎搞.........
2018-03-28 18:07:01
4161
1
原创 R语言编译环境的快速安装
1.下载R软件使用下面命令下载R软件wget http://mirror.bjtu.edu.cn/cran/src/base/R-3/R-3.0.1.tar.gz1下载结果如图所示： 2.解压执行下列命令解压R软件，并切换到解压目录中。tar -zxvf R-3.0.1.tar.gz #解压命令cd R-3.0.1 #切换目录123.安装安装...
2018-03-20 15:12:51
2314
原创 CBoard 0.4.1环境搭建
(第一次写博客，不周之处见谅，记录自己的一些磕磕碰碰)前置环境(仅以自身条件下的记录)： 1、Java 1.8.0_121 2、maven 3.5.3 (亲测3.5.0版本不行，各种报错，折腾了3天多...一直编译CBoard各种失败) 3、tomcat 8.0.32 4、phantomjs-2.1.1-windows （这个下个zip包，直接解...
2018-03-20 10:19:47
5705
5
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人