MapReduce
s小菜鸟
这个作者很懒,什么都没留下…
展开
-
MapReduce找共同好友
用到的数据创建一个txt文件放进去就可以啦 A:B,D,E,H,I,O B:A,C,E,K C:F,A,D,I D:A,E,F,L E:B,C,D,M,L F:B,C,D,E,O,M G:Q,W,A,C,E,O H:A,C,E,D,O I:A,O J:B,P K:A,C,D L:D,E,F M:E,F,G O:A,H,I,J 我是用了两个mapreduce写的 第一个mapreduce map端...原创 2018-11-28 21:39:44 · 219 阅读 · 0 评论 -
setup缓存本地和hdfs文件
从本地读取文件,缓存到map集合中 static Map<String, String> question =new HashMap<String, String>(); BufferedReader bf = new BufferedReader(new FileReader("文件名")) while((line=bf.readLine())!=null) ...原创 2018-12-22 10:22:54 · 210 阅读 · 0 评论 -
利用MapReduce将文件内容写入Hbase表
1、把txt文件传到hdfs上 数据以tab键分隔 2、map端 public class ReadFruitFromHDFSMapper extends Mapper<LongWritable, Text, Text, Put>{ @SuppressWarnings("deprecation") @Override protected void map(LongWritabl...原创 2018-12-27 22:27:55 · 1074 阅读 · 2 评论