Apache Beam 旁路输入(Side inputs)的接口
一、介绍 除了主输入PCollection之外,还可以以旁路输入(side inputs)的形式向ParDo转换提供额外的输入。旁路输入是一个额外的输入,DoFn每次处理input PCollection中的一个元素时都可以访问它。当您指定一个side inputs时,您将创建一些其他数据的视图(PCollectionView),这些数据可以在处理每个元素时从ParDo转换的Do...
原创
2019-07-20 12:38:52 ·
1082 阅读 ·
0 评论