作业
vlions
好好学习天天向上
展开
-
Spark Streaming通过Socket检测空气质量
作业描述: 针对当前空⽓质量监测数据,环保部门需要根据监测数据实时发布预警信息,需要我们在实时到达的六种污染物监测数据中,根据每⼀种数据的监测值进⾏报警检测。 输⼊数据:“空⽓质量监控数据”,格式如下: Time, id, PM2.5, PM10, SO2, CO, NO2, O3 例如:2017-10-26 10:10:10.666,1,160,260,400,50,1000,300原创 2017-10-28 15:23:43 · 846 阅读 · 0 评论 -
Hadoop表连接
首先介绍一下我的作业要求和Hadoop开发环境:作业目的:实现两表连接。 开发环境:IntelliJ IDEA JAVA环境:JDK 9 Hadoop:2.8.1 依赖管理工具:Maven (项目github地址) 作业描述:将Perons表和Order表根据id连接起来,类似于数据库中的join操作。Persons和Order表结构如下图: 实际操作过程如下图: 代码实现如下:pom.原创 2017-10-24 23:53:51 · 429 阅读 · 1 评论