Hadoop的KeyFieldBasedComparator主要使用在基于对Key的比较和分区,但是经过一段时间以来的使用,发现好像问题挺多,而且经常是数组越界的问题。而且他的异常抛出情况不太稳定,会跟问题的量级相关,所以,现在我都是尽量不使用该类,而是使用自定义的Comparator和Partitioner。
Hadoop 的 KeyFieldBasedComparator
最新推荐文章于 2024-04-19 17:08:10 发布
Hadoop的KeyFieldBasedComparator主要使用在基于对Key的比较和分区,但是经过一段时间以来的使用,发现好像问题挺多,而且经常是数组越界的问题。而且他的异常抛出情况不太稳定,会跟问题的量级相关,所以,现在我都是尽量不使用该类,而是使用自定义的Comparator和Partitioner。