scala
iris_new
这个作者很懒,什么都没留下…
展开
-
scala 字符串操作 在报文中寻找指定字符串
scala 字符串操作原创 2017-06-09 14:47:27 · 4222 阅读 · 0 评论 -
spark updateStateByKey用法更新状态
因为本人刚开始接触大数据开发,在使用spark做开发过程遇到了一些问题,所以写下来作为笔记。 先把代码贴出来吧。(网上找的一段代码示例) 关于updateStateByKey : 1.重点:首先会以DStream中的数据进行按key做reduce操作,然后再对各个批次的数据进行累加 2.updateStateByKey 方法中 updateFunc就要传入的参数,他是一个函数。S原创 2017-06-29 18:24:51 · 3734 阅读 · 0 评论