MapReduce
百世修行
aaa
展开
-
MapReduce模板
模板01 MrModelpackage com.bipt.model.MrModel.mymode;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configured;import org.apache.hadoop.fs.P...原创 2018-12-27 23:03:54 · 303 阅读 · 0 评论 -
MapReduce计算气温原始数据
/**1.根据天气的原始数据,通过截取的方式,找出需要的天气2.截取指定字符串的天气*/数据下载package com.bipt.model.wether;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.conf.Configure...原创 2018-12-28 14:53:52 · 918 阅读 · 0 评论 -
MapReduce处理两个文件合并重新显示
文件011 Beijing2 Guangzhou3 Shenzhen4 xi’an文件02factoryname addressIdBeiJing Red Star 1ShenZhen Thunder 3Guangzhou Honda 2Beijing Rising 1Guangzhou Development Bank 2Tencent 3Bank of ...原创 2018-12-28 16:15:37 · 4047 阅读 · 2 评论 -
MapReduce二次排序
源码下载源码下载源数据,排序之前3 121 232 3432 212 1232 31 523 923 31 22 443 124 22排序之后 需要的效果; 这里两列都是 升序排列IntPair [first=1, second=2]IntPair [first=1, second=5]IntPair [first=1, second=23]...原创 2018-12-28 19:52:39 · 294 阅读 · 0 评论 -
自定义实现MapReduce中的wordcount功能导出jar使用
创建Maven项目选择默认路径maven 下一步设置项目名称和包修改pom文件修改后内容如下 pom.xml 文件<project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schem...原创 2018-12-24 23:58:27 · 535 阅读 · 0 评论