Spark scala String Array转为String

最新推荐文章于 2024-10-01 18:52:18 发布

brianv5

最新推荐文章于 2024-10-01 18:52:18 发布

阅读量64

点赞数

文章标签： spark scala 大数据分布式开发语言

本文链接：https://blog.csdn.net/beikewz/article/details/132997350

版权

val rddFromFile = spark.sparkContext.textFile("test.txt").collect().mkString("\n")

注:本地文件的话,这里用相对路径和绝对路径都可以,或直接传hdfs路径

取Array[String]的第一个元素:

val rddFromFile = spark.sparkContext.textFile("test.txt").collect()(0)

参考:https://sparkbyexamples.com/spark/spark-read-text-file-rdd-dataframe/

scala> val args = Array("Hello", "world", "it's", "me")
val args: Array[String] = Array(Hello, world, it's, me)

scala> val string = args.mkString(" ")
val string: String = Hello world it's me

scala> val string = args.mkString("\n")
val string: String =
Hello
world
it's
me