filter是一个过滤操作,每一个V的值都要经过f函数,满的会留下,产生最终结果。
作用是:去除RDD中相同的元素
两个partions做笛卡尔积
把两个RDD联合起来,两个RDD里面的数据类型一定要相同
Spark RDD中Transformation的filter、distinct、cartesian、union详解
最新推荐文章于 2023-04-27 19:52:20 发布
filter是一个过滤操作,每一个V的值都要经过f函数,满的会留下,产生最终结果。
作用是:去除RDD中相同的元素
两个partions做笛卡尔积
把两个RDD联合起来,两个RDD里面的数据类型一定要相同