Spark SQL 算子详解

1、.show()

show(numRows: Int)         -- 显示numRows条
show(truncate: Boolean)  -- 是否最多只显示20个字符，默认为true
show(numRows: Int, truncate: Boolean) --综合前面的显示记录条数，以及对过长字符串的显示格式

2、first, head, take, takeAsList：获取若干行记录

这里列出的四个方法比较类似，其中 
　　（1）first获取第一行记录 
　　（2）head获取第一行记录，head(n: Int)获取前n行记录 
　　（3）take(n: Int)获取前n行数据 
　　（4）takeAsList(n: Int)获取前n行数据，并以List的形式展现 
　　以Row或者Array[Row]的形式返回一行或多行数据。first和head功能相同。 
　　take和takeAsList方法会将获得到的数据返回到Driver端，所以，使用这两个方法时需要注意数据量，以免Driver发生OutOfMemoryError

3、na 函数去除空值
空值null,NaN判断和处理