- 博客(2)
- 收藏
- 关注
RSS订阅原创 关于Flink访问HDFS出现 Hadoop is not in the classpath/dependencies 的问题
Could not find a file system implementation for scheme 'hdfs'的问题
2022-03-20 17:13:53
5257
6
原创 Spark数据类型不同时flatMap()匹配的问题
Spark数据类型不同时flatMap()匹配的问题当我们makeRDD的时候可能会创造不同的数据类型。比如说val rdd: RDD[Any] = sc.makeRDD(List(List(1, 2), 3, List(4, 5)))这里就包含了List类型，和整数的类型，如果这个时候单纯的就按照列表的形式对于整个的List进行flatMap操作的话（形如下面这个代码块）rdd.flatMap( list => { list } )就不
2021-09-22 10:14:55
232
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人