- 博客(2)
- 收藏
- 关注
原创 spark-core需求分析
数据说明: 数据采用_分割字段 每一行表示用户的一个行为, 所以每一行只能是四种行为中的一种. 如果搜索关键字是 null, 表示这次不是搜索 如果点击的品类 id 和产品 id 是 -1 表示这次不是点击 下单行为来说一次可以下单多个产品, 所以品类 id 和产品 id 都是多个, id 之间使用逗号,分割. 如果本次不是下单行为, 则他们相关数据用null来表示 支付行为和下单行为类似. 需求 1: Top10 热门品类 按照每个品类的 点击、下单、支付 的量来统计热门品类. 思路:遍历一次能够计算.
2020-07-28 17:12:06
261
原创 spark-core的入门案例
创建spark-core_2.11的maven工程所需的依赖 <dependencies> <dependency> <groupId>org.apache.spark</groupId> <artifactId>spark-core_2.11</artifactId> <version>2.1.1</version> </dependency
2020-07-26 22:36:31
204
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人