Java spark分组排序_Spark用Java实现二次排序的自定义key

最近看了很多网上的对于SPARK用Java实现二次排序的方法,对于自定义key的做法 基本上都是实现Ordered<>接口,重写$greater、$greater$eq、$less、$less$eq、compare、compareTo方法,定义hashCode、equals·····

感觉好麻烦,其实我们自定义key只是用了里面的compareTo方法,其他的$greater、$greater$eq、$less、$less$eq、compare 不用做任何改动,hashCode、equals方法也是不需要的,不知道为什么大家都喜欢写的那么复杂,而且其实我们根本不用实现Ordered<>接口,只要实现Comparable接口重写compareTo方法就行了,很简洁,以下是我的自定义key:

import java.io.Serializable;

import scala.math.Ordered;

/**

* 自定义的二次排序key

*/

public class SecondarySortKey implements Comparable,Serializable {

private static final long serialVersionUID = -2366006422945129991L;

private int first;

private int second;

public SecondarySortKey(int first, int second) {

this.first = first;

this.second = second;

}

@Override

public int compareTo(SecondarySortKey other) {

if(this.first - other.getFirst() != 0) {

return this.first - other.getFirst();

} else {

return this.second - other.getSecond();

}

}

public int getFirst() {

return first;

}

public void setFirst(int first) {

this.first = first;

}

public int getSecond() {

return second;

}

public void setSecond(int second) {

this.second = second;

}

}

测试过没有问题。我不知道是我理解不够深彻还是大家故意把Java自定义key的方法写复杂点以体现出scala的简洁和优美(哈哈哈),如果有没考虑到的地方敬请指教!!!

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值