- 博客(6)
- 资源 (1)
- 收藏
- 关注
RSS订阅原创 Kafka中的名词说明和常用命令（详细）
Kafka中的名词说明：1、Producer：生产者，向kafka broker中发送消息客户端2、Consumer：消费者，向kafka broker中拉取消息客户端3、Consumer Group：消费者组，由多个Consumer组成，消费者内每个消费者负责消费不同分区，一个分区只能由一个消费者进行消费,消费者组之间互不影响,所有的消费者都属于某个消费者组,即消费者组是逻辑上一个订阅者...
2019-12-20 17:49:27
484
原创 Sparcore小案例
Spark广告小案例数据格式:timestamp province city userid adid时间点 省份 城市 用户 广告用户ID范围:0-99省份,城市,ID：相同:0-9**adid:**0-19需求:1.统计每一个省份点击TOP3的广告IDimport org.apache.spark.rdd.RDDobject HomeWor...
2019-12-12 09:19:45
146
原创 Spark算子练习+计算用户停留时间最长的两个地方
Spark算子练习题计算用户停留时间最长的两个地方1. 需求根据用户产生日志的信息,计算用户停留时间最长的两个地方，19735E1C66.log 这个文件中存储着日志信息文件组成:手机号,时间戳,基站ID 连接状态(1连接0断开)lac_info.txt 这个文件中存储基站信息文件组成 基站ID, 经,纬度在一定时间范围内,求所用户经过的所有基站所停留时间最长的Top22.思路:...
2019-12-11 21:00:19
670
原创 scala_特质（Trait）
特质(Trait)定义特质是Scala中特有一种形式；特质(Trait)用于类于类之间共享方法和属性,Scala特质相当于是Java8中的接口在Scala特质中即可以定义属性,也可以定义抽象方法而且还可以定义已经实现的方法ps:Scala中一切皆继承,Scala会将所有的数据类型都看做类,所以只有一个关键字 extends没有 implements 实现语法1.在没有父类的前...
2019-12-06 19:52:37
149
原创 Scala集合练习
object Homework_Scala_03 { def main(args: Array[String]): Unit = { //1.创建一个List(3,2,4,6,7,5,1,0,9,8) val list: List[Int] = List(3,2,4,6,7,5,1,0,9,8) println("创建的集合为："+list) //2.将list中...
2019-12-05 20:04:50
548
原创 wordcount_scala版本
wordcount_scala版本 object wordCount_scala { def main(args: Array[String]): Unit = { //读取文件数据存储在集合中 val line = List("hello tom hello jerry", "hello xiaobai hello") //将集合中的数据进行处理，获取集合中的每一条...
2019-12-05 17:43:43
177
Mysql基础练习.docx
2019-08-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人