- 博客(2)
- 收藏
- 关注
RSS订阅原创 利用spark分析点击流日志数据PV和UV指标开发
今天我就做一个简单的小分享 ，四个小案例 分别是PV和UV的scala版本和java版本的 在学习scala的我们要知道，scala与java是可以互通的 话不多说 直接来看我们今天的需求 ： 1 . PV是页面浏览量，在这里即是日志记录数。 2 . UV是用户访问量（独立访客）。把日志数据中的ip地址去重后，再进行统计即可。 首先我们准备好已经采集的点击流数据 ...
2019-04-27 09:10:05
788
原创 spark的计数统计在本地与集群运行
在这里 我们先简易的看一下一个本地运行的单词计数统计 这里不用多说 创建一个简单的maven项目，大致就是下面的图片 编写一个本地的技术统计 object SingleCount { def main(args: Array[String]): Unit = { //1.执行入口 //2.创建sparkConf对象 设置appname和master地址 ...
2019-04-24 21:48:58
334
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人