- 博客(6)
- 资源 (1)
- 收藏
- 关注
原创 Kafka中的名词说明和常用命令(详细)
Kafka中的名词说明: 1、Producer:生产者,向kafka broker中发送消息客户端 2、Consumer:消费者,向kafka broker中拉取消息客户端 3、Consumer Group:消费者组,由多个Consumer组成,消费者内每个消费者负责消费不同分区,一个分区只能由一个消费者进行消费,消费者组之间互不影响,所有的消费者都属于某个消费者组,即消费者组是逻辑上一个订阅者 ...
2019-12-20 17:49:27
502
原创 Sparcore小案例
Spark广告小案例 数据格式: timestamp province city userid adid 时间点 省份 城市 用户 广告 用户ID范围:0-99 省份,城市,ID:相同:0-9 **adid:**0-19 需求: 1.统计每一个省份点击TOP3的广告ID import org.apache.spark.rdd.RDD object HomeWor...
2019-12-12 09:19:45
161
原创 Spark算子练习+计算用户停留时间最长的两个地方
Spark算子练习题 计算用户停留时间最长的两个地方 1. 需求 根据用户产生日志的信息,计算用户停留时间最长的两个地方,19735E1C66.log 这个文件中存储着日志信息文件组成:手机号,时间戳,基站ID 连接状态(1连接0断开)lac_info.txt 这个文件中存储基站信息文件组成 基站ID, 经,纬度在一定时间范围内,求所用户经过的所有基站所停留时间最长的Top2 2.思路:...
2019-12-11 21:00:19
710
原创 scala_特质(Trait)
特质(Trait) 定义 特质是Scala中特有一种形式; 特质(Trait)用于类于类之间共享方法和属性,Scala特质相当于是Java8中的接口 在Scala特质中即可以定义属性,也可以定义抽象方法而且还可以定义已经实现的方法 ps:Scala中一切皆继承,Scala会将所有的数据类型都看做类,所以只有一个关键字 extends 没有 implements 实现 语法 1.在没有父类的前...
2019-12-06 19:52:37
169
原创 Scala集合练习
object Homework_Scala_03 { def main(args: Array[String]): Unit = { //1.创建一个List(3,2,4,6,7,5,1,0,9,8) val list: List[Int] = List(3,2,4,6,7,5,1,0,9,8) println("创建的集合为:"+list) //2.将list中...
2019-12-05 20:04:50
618
原创 wordcount_scala版本
wordcount_scala版本 object wordCount_scala { def main(args: Array[String]): Unit = { //读取文件数据存储在集合中 val line = List("hello tom hello jerry", "hello xiaobai hello") //将集合中的数据进行处理,获取集合中的每一条...
2019-12-05 17:43:43
262
Mysql基础练习.docx
2019-08-17
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人