java中dataset设置大小_spark通用数据帧到dataSet类型参数边界

Spark内部代表 DataFrame 为 Dataset[Row] . 现在我必须输入：

SparkDatasetProvider[T <: product c baseconfiguration>

SparkDataFrameProvider[C <: baseconfiguration>

extends SparkDatasetProvider[Row, C]

即我想确保支持 Dataset[T] 和常规 Row 的案例类 . 我该如何解决：

type arguments [org.apache.spark.sql.Row,C] do not conform to trait SparkDatasetProvider's type parameter bounds

因为我不知道一个结合 Row 和常规 case classes 的超类 .

编辑

trait SparkDatasetProvider[T <: encoder>

def provide(spark: SparkSession): Dataset[T]

}

trait SparkDataFrameProvider extends SparkDatasetProvider[Row, C] {

override def provide(spark: SparkSession): DataFrame

}

object FooProvider extends SparkDataFrameProvider{

override def provide(spark: SparkSession): DataFrame = null

}

final case class FooFeed(foo:Int, bar:String)

object FooProviderC extends SparkDatasetProvider[FooFeed]{

override def provide(spark: SparkSession): Dataset[FooFeed] = null

}

type parameter bounds [T <: org.apache.spark.sql.encoder>

object FooProviderC extends SparkDatasetProvider[FooFeed]{

根据这个建议 - 然而，我无法让它发挥作用 .