Spark
huangle63
想着太阳进发
展开
-
Scala 连接 mysql
import java.sql.DriverManager/** * Created by root on 16-11-2. */object OnlineWordcount { def main(args: Array[String]): Unit = { val conn = DriverManager.getConnection( "jdbc:mysq原创 2016-11-03 13:36:05 · 521 阅读 · 0 评论 -
Spark WordCount 数据流分析
import org.apache.spark.{SparkConf, SparkContext}/** * Created by huangle63 on 2016/9/22. */object WrodCount { def main(args: Array[String]): Unit = { val conf = new SparkConf() conf.setAp原创 2016-09-27 08:52:53 · 612 阅读 · 0 评论 -
Spark 三次排序
Spark 三次排序原创 2016-10-01 10:44:17 · 475 阅读 · 0 评论 -
Spark2.0 相关知识汇总
1. VMware搭建Ubuntu16.04 spark集群VMware 安装Ubuntu16.04Ubuntu 启用root用户登陆安装 VMware tools安装jdk1.8,配置环境变量安装ssh虚拟机设置固定ip设置/etc/hostname 本系统的名字(如:Master,Worker1);设置/etc/hosts 主从机的ip对应ssh无密码验证配置原创 2016-09-22 16:50:52 · 1606 阅读 · 0 评论