无法使用反射的方式创建 DataSet 主要是 Spark 中的 implicits 隐式转换包没有导入。当你创建的是 HiveContext 的时候就需要导入 HiveContext 的
比如:
val sc = new SparkContext(conf)
val hiveContext = new HiveContext(sc)
那么你就需要导入:
import hiveContext.implicits._
如果是 SparkSession 那么如下:
val sparkSrssion = SparkSession
.builder()
.appName("Spark SQL basic example")
.getOrCreate()
导入隐式转换包:
import sparkSrssion.implicits._