通过PySpark访问Hbase并转成DataFrame
介绍PySpark访问Hbase的两种方法,一种是通过newAPIHadoopRDD,读取Hbase为RDD,并转成DataFrame,另一种是在Hive里建立Hbase的外部表,然后通过Spark Sql读取一、通过newAPIHadoopRDD读取#spark连接hbase,读取RDD数据spark = SparkSession.builder.master("yarn-clien...
原创
2018-09-15 21:58:54 ·
4474 阅读 ·
3 评论