Top down clustering

是一种层次聚类算法,先找到大的聚类,然后在大的聚类里边找小的聚类,所以名字叫top down

除了MinHash 聚类算法,其它聚类算法都可以用到top down的算法中,包括top level和bottom level

top level输出需要后处理,分成多组,这样bottom level聚类可以分别对每个组实施,对应的类是ClusterOutputPostProcessorDriver

聚类算法结束后,一般输出数据放置在两个目录:

clusteredPoints

clusters-0-final

这样的结果bottom level是没法处理的,ClusterOutputPostProcessorDriver以这两个目录为输入计算得到按聚类id分目录的分组

java api

run(Path input, Path output, boolean runSequential)

input:top level的输出目录,里边包含了clusteredPointsclusters-0-final

output:后处理输出目录

runSequential:是否sequential处理,否的话会使用map-reduce




评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值