Apache
文章平均质量分 90
taiyangdixiasj
这个作者很懒,什么都没留下…
展开
-
Pig基础学习【持续更新中】
本文参考了Pig官方文档以及已有的一些博客,并加上了自己的一些知识性的理解。目前正在持续更新中。Pig作为一种处理大规模数据的高级查询语言,底层是转换成MapReduce实现的,可以作为MapReduce的一种脚本语言,大大简化了对数据操作的代码。原创 2015-07-10 14:34:16 · 894 阅读 · 0 评论 -
Spark性能优化-coalesce(n)
Spark 性能优化原创 2015-08-10 16:54:16 · 1435 阅读 · 0 评论 -
SparkLauncher 1.6 版本bug
简要介绍了SparkLauncher 类,并指出在Spark 1.6版本中其应用过程中相关类的一个Bug,该Bug目前在Spark 2.0中得到解决。原创 2016-12-12 22:47:34 · 2425 阅读 · 0 评论