Spark中dataframe里data.drop()和data.na.drop()的区别

问题描述：原始数据data总行数是1303638，使用data.drop()后数据总行数是1303638，使用data.na.drop()后数据总行数是0；为啥data.drop()没有丢弃null或nan的数据？

总结：

    1）data.drop()如果不传递列名，不会做任何操作；

    2）通过以下比较发现，drop是用来丢弃列的，而na.drop是用来丢弃行的；

    3）通过以下比较发现，dataframe.drop是直接调用的dataset中drop接口；

    4）如果想要调用DataframeNaFunctions中drop接口，需要先利用dataframe.na得到一个DataframeNaFunctions类型变量，然后利用该变量调用DataframeNaFunctions中drop接口。

参考：https://www.cnblogs.com/cc11001100/p/9954862.html

 

（1）na作用

Dataset中na接口的描述如下