- 博客(3)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 hadoop生成序列化文件（SequenceFile）的程序
package hadoop; import java.io.IOException; import java.net.URI; import java.nio.file.Path; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.had
2017-10-10 23:18:45
919
原创 利用 HBase 模拟微博的实例
操作HBase数据库的类： package mblog; import java.io.IOException; import java.util.ArrayList; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.hbase.Cell; import org.apache.hadoop.hbase
2017-10-10 23:01:56
2596
原创 hadoop 二次排序 group函数的作用的说明
hadoop mapreduce作业通过组合key实现二次排序的过程中，只要实现组合key的类就可以了。mapreduce框架本身会基于key对输出进行排序。 而partion函数只为了是实现数据规模较大时，对map的输出实现分区。为启动多个reduce任务做准备。 group函数也是可有可无的。 group函数的作用是对key进行分组，例如对于map的结果： [(k1, k21), v1
2017-10-10 20:55:19
635
protoc.exe 2.5.0
2017-11-08
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人