Hadoop
文章平均质量分 79
一 研 为定
这个作者很懒,什么都没留下…
展开
-
hadoop后端——使用java数据流配置
在做之前需要在application.properties写上自己虚拟机的ip号和端口号1、mkdir创建文件夹 首先需要定义抽象类,然后配置namenode的地址,然后指定用户名,获取FileSystem对象,注意用户名一定要改成自己虚拟机的用户名,否则就不能成功。然后新建路径,起名为filePath,使用mkdir创建路径。 @Override public void mkdir(String dir) throws Exception{ ...原创 2021-06-22 16:17:55 · 409 阅读 · 0 评论 -
用户消费行为分析(MapReduce实现,Hive分析)
一、题目要求 数据来自CDNow网站的一份用户购买CD明细,本数据集共有 6 万条 左右数据,数据为 CDNow 网站 1997年1月至1998年6月的用户行为 数据原创 2021-06-19 11:19:03 · 2682 阅读 · 0 评论 -
环境大数据MapReduce
目录一、题目要求第一题:月平均气温统计第二题:每日空气质量统计第三题:各空气质量分类天数统计二、问题思路(一)、月平均气温统计1、思路2、代码(二)、每日空气质量统计1、思路2、代码(三)、各空气质量分类天数统计1、思路2、代码一、题目要求原数据如下:第一题:月平均气温统计得到示例结果如下:第二题:每日空气质量统计示例结果如下:第三题:各空气质量分类天数统计结果示例如下:下面我将对这三个问题进..原创 2021-06-15 17:11:49 · 11946 阅读 · 10 评论