自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

lzf的博客

  • 博客(3)
  • 资源 (10)
  • 问答 (1)
  • 收藏
  • 关注
全部文章> 2018年01月
排序：
按最后发布时间
按访问量
RSS订阅
09月 08月 07月 06月 05月 04月 03月 02月 01月

转载 Spark streaming接收Kafka数据的2种方式

前言在WeTest舆情项目中，需要对每天千万级的游戏评论信息进行词频统计，在生产者一端，我们将数据按照每天的拉取时间存入了Kafka当中，而在消费者一端，我们利用了spark streaming从kafka中不断拉取数据进行词频统计。本文首先对spark streaming嵌入kafka的方式进行归纳总结，之后简单阐述Spark streaming+kafka 在舆情项目中的应用，最后将自...

2018-01-28 22:42:37 3519

原创 spark2.3 源码分析之CoarseGrainedSchedulerBackend

概述CoarseGrainedSchedulerBackend是一个阻塞等待coarse-grained executors来连接的SchedulerBackend。该SchedulerBackend会在整个spark-job期间持有每个executor，而不是一个task结束后再为下一个task向Scheduler申请新的executor。executor可以通过多种方式建立，具体的方式由继...

2018-01-28 22:34:05 1484

原创 spark2.3源码分析之CoarseGrainedExecutorBackend

概述CoarseGrainedExecutorBackend向CoarseGrainedSchedulerBackend端发送的消息主要如下：registerExecutor：注册executor。SchedulerBackend在确认execId可以注册后，回复注册成功的消息。 statusUpdate：汇报Executor中运行的task的状态。CoarseGrainedExec...

2018-01-28 22:08:44 922

ios的网络图片下载类库
ios的网络图片下载类库

2016-03-31

viewpager的下横线指示器
viewpager的下横线指示器,使用translateAnimation位移动画实现被选中页卡的下横线的移动

2015-07-30

viewpager实现页面导航之三
新特点是使用translateAnimation位移动画实现被选中的点的移动。而不是用以往的方法实现点的切换。之所以说是点的移动而不是点的切换是因为，运行代码滑动页面时真的可以看到像在Flash中绿点的移动效果。以往的方法只是一个点换成灰色图片，另一个换成绿色图片，没有移动。

2015-07-22

viewpager实现页面导航
viewpager实现页面导航，代码耦合性低。比如不在initiateItem（）中设计并返回页卡布局文件对象。姑且可以看看了解

2015-07-21

viewpager与预编译的点布局实现页面导航效果
该源代码简洁的实现了在页面滑动时点的变化，而且包容点的布局是经过重写的布局，单独作为一个文件，不在MainActivity.java中，耦合低

2015-07-20

进销存管理系统之二
这是由明日科技公司开发的进销存管理系统，跟上一例代码有些相似之处

2015-07-17

进销存管理系统
这是个教你怎么连接sqlserver2008的代码，只要查看dao.java即可

2015-07-17

java+Mysql学生数据库管理系统
该源代码里会教你怎么自定义类将在数据库查询到的结果集以表格的形式展示在界面上；怎么自定义图形面板添加背景图片

2015-07-11

MyListView
listview的BaseAdapter用法的android源代码，还用了convert与viewholder的回收机制

2015-07-10

导入第三方类库却出现the importXXX can not be resolved

2015-06-04

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除