smileyboy2009的专栏

spark 读取hive 只能读取表头，不能获取数据。

从零起步，分阶段无任何障碍逐步掌握大数据统一计算平台Spark，从Spark框架编写和开发语言Scala开始，到Spark企业级开发，再到Spark框架源码解析、Spark与Hadoop的融合、商业案例和企业面试，一次性彻底掌握Spark，成为云计算大数据时代的幸运儿和弄潮儿，笑傲大数据职场和人生！学习条件1，掌握Scala；2，精通Spark企业及开发；3，精通Spark框架源码实现；4

hadoop3.0x 后要比spark快10倍！

在spark 2.4中报ArrayIndexOutOfBoundsException 原因是Spark 2.4.0中引用的paranamer版本是2.7导致问题。在spark-core / spark-sql之前添加以下依赖项为我解决了这个问题。<dependency> <groupId>com.thoughtworks.paranamer</gro...