2017年08月_AISeekOnline

12月 11月 09月 08月 07月 05月 04月 03月 01月

原创 spark简介

Apache Spark项目于2009年诞生于伯克利大学的AMPLab实验室，当初的目的在于将内存内分析机制引入大规模数据集当中。在那个时候，Hadoop MapReduce的关注重点仍然放在那些本质上无法迭代的大规模数据管道身上。想在2009年以MapReduce为基础构建起分析模型实在是件费心费力而又进展缓慢的工作，因此AMPLab设计出Spark来帮助开发人员对大规模数据集执行交互分析、从而

2017-08-22 21:23:30 284

原创 ssh command一台主机同时给多台主机远程操作

机器列表：host0，host1， host2，host3，host4，host5实现功能：在host0上面对其他机器执行指令 1、实现host0可以免密码登录host1-host5，这个可以自行百度 2、在host0的home目录下新建文件.scmd.sh如下：#!/bin/shpaserArgs(){ OLD_IFS="$IFS" IFS="," arr=($1)

2017-08-19 15:52:51 7228

原创 spark读取mongodb（maven）

org.mongodb.spark mongo-spark-connector_2.11 2.0.0 org.apache.spark spark-sql_2.11 2.0.0import com.mongodb.spark._import com.mongodb.spark.config.ReadConfigimport org.

2017-08-15 10:02:05 3218

快学Scala（中文完整版）

Scala是一门以Java虚拟机（JVM）为目标运行环境并将面向对象和函数式编程语言的最佳特性结合在一起的编程语言。你可以使用Scala编写出更加精简的程序，同时充分利用并发的威力。由于Scala运行于JVM之上，因此它可以访问任何Java类库并且与Java框架进行互操作。本书从实用角度出发，给出了一份快速的、基于代码的入门指南。Horstmann以“博客文章大小”的篇幅介绍了Scala的概念，让你可以快速地掌握和应用。实际上手的操作，清晰定义的能力层次，从初级到专家级，全程指导。

2018-01-19

大数据技术之spark技术内幕.zip

本书主要介绍了spark环境搭建、rdd的实现原理、spark的调度等知识

2018-01-19

算法导论（第三版）

2016-12-01

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

清晨随笔