自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(8)
  • 收藏
  • 关注

原创 第103课:动手实战联合使用Spark Streaming、Broadcast、Accumulator实现在线黑名单过滤和计数

第103课:动手实战联合使用Spark Streaming、Broadcast、Accumulator实现在线黑名单过滤和计数

2016-05-12 22:25:43 567

原创 第1课:通过案例对SparkStreaming 透彻理解三板斧之一

感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看  联系邮箱18610086859@126.com  电话:18610086859  QQ:1740415547  微信号:18610086859一 为什么从Spark Streaming入手?Spark目前有四个Spark SQL, Spark Streaming, MLlib(machine

2016-05-08 10:32:16 2435

原创 第5课:基于案例一节课贯通Spark Streaming流计算框架的运行源码

感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看 联系邮箱18610086859@126.com 电话:18610086859 QQ:1740415547 微信号:18610086859

2016-05-08 09:36:29 407

原创 第4课:Spark Streaming的Exactly-One的事务处理和不重复输出彻底掌握

感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看  联系邮箱18610086859@126.com  电话:18610086859  QQ:1740415547  微信号:18610086859见图见真相一 Exactly once 事务什么事Exactly once 事务?数据仅处理一次并且输出一次.二 Exactly once 事务处理前提

2016-05-08 09:23:34 728

原创 第2课:通过案例对SparkStreaming 透彻理解三板斧之二:解密SparkStreaming

感谢DT大数据梦工厂支持提供以下内容, DT大数据梦工厂专注于Spark发行版定制。详细信息请查看 联系邮箱18610086859@126.com 电话:18610086859 QQ:1740415547 微信号:18610086859上节课通过降维的方式宏观整个spark streaming的运行的过程,spark-streaming其本质是构建在spark-core之上的一个应

2016-05-08 08:43:08 1793

原创 第3课:解读spark –streaming运行机制

感谢DT大数据梦工厂支持提供以下内容,DT大数据梦工厂专注于Spark发行版定制。详细信息请查看  联系邮箱18610086859@126.com  电话:18610086859  QQ:1740415547  微信号:18610086859定制班:第三课 解读spark –streaming运行机制一 从实战出发首先我们运行以下的程序,然后通过这个程序的运行过程进一步加深理解Spark S

2016-05-07 16:46:06 1919

转载 数据库连接池

package pool; /** * 这是外部可以配置的连接池属性 * 可以允许外部配置,拥有默认值 * @author Ran * */ public class DBbean { // 连接池属性 private String driverName; private String url; private String userN

2016-05-02 22:38:25 372

原创 imf大数据:第95课:streaming实战,实现在线热搜索词

imf大数据:第95课:streaming实战,实现在线热搜索词。import org.apache.spark.SparkConfimport org.apache.spark.streaming.{Duration, Seconds, StreamingContext}object class_95_OnlineHottestItems{ /** * 使用Scala开发集群运行

2016-05-02 16:34:02 321

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除