- 博客(2)
- 收藏
- 关注
原创 Learning Spark笔记17-Spark SQL
第9章Spark SQLSpark SQL提供3个主要的功能:1.可以从结构化的数据源中加载数据(例如,JSON,Hive和Parquet)2.可以使用SQL查询数据,无论是在Spark程序内还是使用诸如JDBC或ODBC这种连接器。3.使用Spark程序的时候,Spark SQL提供了丰富的集成,在SQL和Python或Java或Scala代码,包括可以连接RDDs和SQ
2017-11-24 08:29:24 399
原创 Learning Spark笔记16-调试Spark
第8章调试Spark使用SparkConf配置SparkSpark中主要的配置机制就是SparkConf类。当你创建一个SparkContext时,SparkConf是必须要有的。Example 8-1. Creating an application using a SparkConf in Python# Construct a confco
2017-11-16 07:58:36 234
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人