Hadoop
关注
分享
扫一扫
文章平均质量分 80
hawkeye丶
这个作者很懒，什么都没留下…
展开
-
上传到HDFS文件系统中，往该文本文件写入姓名，再将其读出打印
package com.upload;import java.io.ByteArrayInputStream;import java.net.URI;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FSDataInputStream;import org.apache.hadoop.fs.FS...原创 2018-04-02 15:38:29 · 369 阅读 · 0 评论 -
HadoopMapReduceWordcount示例程序
package com.wordcount;import java.io.IOException;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce.Reducer;public class wordreducer ex...原创 2018-04-02 16:04:52 · 176 阅读 · 0 评论 -
HadoopMapReduce数据去重
package com.shuffle;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce.Mapper;import java.io.*;public class ShuffleMapper extends Mapper原创 2018-04-24 17:35:48 · 418 阅读 · 0 评论 -
HadoopMapReduce数据排序
package com.sort;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.mapreduce.Job;import org.apache.hado...原创 2018-05-14 11:04:54 · 557 阅读 · 0 评论 -
HadoopMapReduce求平均成绩
package com.averscore;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.IntWritable;import org.apache.hadoop.io.Text;import org.apache.hadoo...原创 2018-05-14 11:06:33 · 1744 阅读 · 0 评论 -
HadoopMapReduce单表关联
package com.singlejoin;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce....原创 2018-05-14 16:59:56 · 259 阅读 · 0 评论 -
HadoopMapReduce倒排索引
package com.IverseIndex;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.Path;import org.apache.hadoop.io.Text;import org.apache.hadoop.mapreduce...原创 2018-05-14 20:09:54 · 698 阅读 · 0 评论 -
HbaseAPI编程示例
package com.HbaseJDBC;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.hbase.*;import org.apache.hadoop.hbase.client.*;import java.io.IOException;public class hbase { public...原创 2018-07-02 10:30:42 · 565 阅读 · 0 评论 -
HadoopMapReduce寻找共同好友
假设有所有用户的好友列表数据，冒号前是一个用户，冒号后是该用户的所有好友（数据中的好友关系是单向的），如果两个用户之间存在共同好友，需要找出他们之间的共同好友。样例文本如下:A:B,C,D,F,E,OB:A,C,E,KC:F,A,D,ID:A,E,F,LE:B,C,D,M,LF:A,B,C,D,E,O,MG:A,C,D,E,FH:A,C,D,E,OI:A,OJ:B,OK:A,C...原创 2018-07-04 22:30:27 · 561 阅读 · 1 评论