Flink调优-分区器策略

控制数据流向

在流进行转换操作后，Flink通过分区器来精确得控制数据流向。

• Flink分区 器如下图

1.随机分区器 ShufflePartitioner
根据均匀分布对元素进行随机划分

@Internal
public class ShufflePartitioner<T> extends StreamPartitioner<T> {
	private static final long serialVersionUID = 1L;

	private Random random = new Random();

	private final int[] returnArray = new int[1];

	@Override
	public int[] selectChannels(SerializationDelegate<StreamRecord<T>> record,
			int numberOfOutputChannels) {
		returnArray[0] = random.nextInt(numberOfOutputChannels);
		return returnArray;
	}

	@Override
	public StreamPartitioner<T> copy() {
		return new ShufflePartitioner<T>();
	}

	@Override
	public String toString() {
		return "SHUFFLE";
	}
}

2. 自定义分区器