MapReduce
s小菜鸟
这个作者很懒,什么都没留下…
展开
-
MapReduce找共同好友
用到的数据创建一个txt文件放进去就可以啦A:B,D,E,H,I,OB:A,C,E,KC:F,A,D,ID:A,E,F,LE:B,C,D,M,LF:B,C,D,E,O,MG:Q,W,A,C,E,OH:A,C,E,D,OI:A,OJ:B,PK:A,C,DL:D,E,FM:E,F,GO:A,H,I,J我是用了两个mapreduce写的第一个mapreducemap端...原创 2018-11-28 21:39:44 · 195 阅读 · 0 评论 -
setup缓存本地和hdfs文件
从本地读取文件,缓存到map集合中static Map<String, String> question =new HashMap<String, String>();BufferedReader bf = new BufferedReader(new FileReader("文件名")) while((line=bf.readLine())!=null) ...原创 2018-12-22 10:22:54 · 205 阅读 · 0 评论 -
利用MapReduce将文件内容写入Hbase表
1、把txt文件传到hdfs上数据以tab键分隔2、map端public class ReadFruitFromHDFSMapper extends Mapper<LongWritable, Text, Text, Put>{ @SuppressWarnings("deprecation") @Override protected void map(LongWritabl...原创 2018-12-27 22:27:55 · 1050 阅读 · 2 评论