SparkSQL 字符串函数

最新推荐文章于 2024-06-01 08:43:14 发布

晚春初夏的你

最新推荐文章于 2024-06-01 08:43:14 发布

阅读量673

点赞数

分类专栏： Spark sql 文章标签： spark

本文链接：https://blog.csdn.net/weixin_42834505/article/details/109177493

版权

本文主要探讨SparkSQL中关于字符串的处理函数，包括collect_set、collect_list、concat_ws和concat等，通过样例数据和实际操作展示其用法。

摘要由CSDN通过智能技术生成

SparkSQL 字符串函数

1.样例类的定义

case class Student(name:String,subject:String,score:String)

2.测试数据展示

val spark: SparkSession = SparkSession.builder().appName("test").master("local[*]").getOrCreate()
//导入隐式包
import spark.implicits._

val df= spark.sparkContext.textFile("file:///E:\\MyEclipse\\java\\myfactory\\data\\data.txt").map(line =>{
   
   val arr

最低0.47元/天解锁文章

晚春初夏的你

关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
SparkSQL 字符串函数

SparkSQL 字符串函数1.样例类的定义case class Student(name:String,subject:String,score:String)2.测试数据展示val spark: SparkSession = SparkSession.builder().appName("test").master("local[*]").getOrCreate()//导入隐式包import spark.implicits._val df= spark.sparkContext.tex
复制链接

扫一扫