- 博客(8)
- 收藏
- 关注
原创 第103课:动手实战联合使用Spark Streaming、Broadcast、Accumulator实现在线黑名单过滤和计数
第103课:动手实战联合使用Spark Streaming、Broadcast、Accumulator实现在线黑名单过滤和计数
2016-05-12 22:25:43 567
原创 第1课:通过案例对SparkStreaming 透彻理解三板斧之一
感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看 联系邮箱18610086859@126.com 电话:18610086859 QQ:1740415547 微信号:18610086859一 为什么从Spark Streaming入手?Spark目前有四个Spark SQL, Spark Streaming, MLlib(machine
2016-05-08 10:32:16 2435
原创 第5课:基于案例一节课贯通Spark Streaming流计算框架的运行源码
感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看 联系邮箱18610086859@126.com 电话:18610086859 QQ:1740415547 微信号:18610086859
2016-05-08 09:36:29 407
原创 第4课:Spark Streaming的Exactly-One的事务处理和不重复输出彻底掌握
感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看 联系邮箱18610086859@126.com 电话:18610086859 QQ:1740415547 微信号:18610086859见图见真相一 Exactly once 事务什么事Exactly once 事务?数据仅处理一次并且输出一次.二 Exactly once 事务处理前提
2016-05-08 09:23:34 728
原创 第2课:通过案例对SparkStreaming 透彻理解三板斧之二:解密SparkStreaming
感谢DT大数据梦工厂支持提供以下内容, DT大数据梦工厂专注于Spark发行版定制。详细信息请查看 联系邮箱18610086859@126.com 电话:18610086859 QQ:1740415547 微信号:18610086859上节课通过降维的方式宏观整个spark streaming的运行的过程,spark-streaming其本质是构建在spark-core之上的一个应
2016-05-08 08:43:08 1793
原创 第3课:解读spark –streaming运行机制
感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看 联系邮箱18610086859@126.com 电话:18610086859 QQ:1740415547 微信号:18610086859定制班:第三课 解读spark –streaming运行机制一 从实战出发首先我们运行以下的程序,然后通过这个程序的运行过程进一步加深理解Spark S
2016-05-07 16:46:06 1919
转载 数据库连接池
package pool; /** * 这是外部可以配置的连接池属性 * 可以允许外部配置,拥有默认值 * @author Ran * */ public class DBbean { // 连接池属性 private String driverName; private String url; private String userN
2016-05-02 22:38:25 372
原创 imf大数据:第95课:streaming实战,实现在线热搜索词
imf大数据:第95课:streaming实战,实现在线热搜索词。import org.apache.spark.SparkConfimport org.apache.spark.streaming.{Duration, Seconds, StreamingContext}object class_95_OnlineHottestItems{ /** * 使用Scala开发集群运行
2016-05-02 16:34:02 321
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人