自定义博客皮肤VIP专享

*博客头图：

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览 取消 提交

自定义博客皮肤

-+
上一步保存

wusuopuBUPT的专栏

https://github.com/wusuopubupt

  • 博客(5)
  • 资源 (24)
  • 收藏
  • 关注
全部文章> 2017年07月
排序：
按最后发布时间
按访问量
RSS订阅
11月 09月 08月 07月 06月 05月 04月

原创 Spark源码--逻辑计划优化之表达式简化

一、常量合并(Constant Folding)二、简化过滤器 (Simlify Filters)三、简化Cast (Simplify Casts)四、简化大小写转化表达式 (Simplify Case Conversion Expressions)五、优化In语句 (Optimize In)六、简化Like语句(Simplify Like)七、替换Null表达式 (Null Propagat

2017-07-26 19:17:54 1520

原创 Spark源码--RuleExecutor

Spark SQL catalyst RuleExecutor的作用是分批次(batch)执行一系列的优化规则直到稳定点(fixpoint)或最大迭代次数,如图所示： 实现如下： 源码如下：   /** 优化规则执行器 */ abstract class RuleExecutor[TreeType : TreeNod

2017-07-26 19:14:44 1048

原创 Spark源码--JobListener

Spark-1.6版本JobListener trait:用于监听Job运行结束(成功/失败)事件，声明了taskSucceeded和jobFailed方法package org.apache.spark.scheduler/** * Interface used to listen for job completion or failure events after submitting a j

2017-07-18 14:56:28 773

原创 Spark源码--Stage

Stage是Spark调度执行的物理单元Spark1.6版本Stage源码：package org.apache.spark.schedulerimport scala.collection.mutable.HashSetimport org.apache.spark._ import org.apache.spark.rdd.RDD import org.apache.spark.util.Cal

2017-07-18 12:20:27 626

原创 Spark源码--EventLoop

Spark1.6版本 EventLoop.scala源码如下： package org.apache.spark.utilimport java.util.concurrent.atomic.AtomicBoolean import java.util.concurrent.{BlockingQueue, LinkedBlockingDeque}import scala.util.control.

2017-07-18 10:26:03 761

hadoop MapReduce介绍
hadoop MapReduce介绍 SergeBazhievsky_Introduction_to_Hadoop_MapReduce_v2.pdf 很好的学习hadoop mapreduce计算框架的资料

2016-03-04

MinGW-5.1.6.rar
离线版的比较旧的(5.16)MinGW安装, 然后，把C:\MinGW\bin中的mingw32-make.exe 改名成为 make.exe，接着配置环境变量，结束~

2014-08-03

CodeIgniter2.0中文手册.chm
CodeIgniter2.0中文手册.chm 好好学习，天天向上

2014-02-28

计算机网络
计算机 网络 通信原理的讲解PPT 和学校学到的真不一样。

2013-12-09

php+mysql 八大动态网站开发 源代码
php+mysql 八大动态网站开发 源代码 非常好用，适合广大Php初学者/爱好者学习使用 也适合有经验的phper温习使用 书中的有些函数已经被php官网不推荐使用了，所以，用的时候最好参照php官网php.net/manual进行学习

2013-07-16

iluowu PHPCMS 模板
iluowu PHPCMS 模板 对程序员很有用哦

2013-04-08

GBK-UTF8转换工具好用
GBK UIF-8转换工具 对程序员们很有用哦

2013-04-08

jquery 手册 中文版
jquery 手册 中文版 强大的javascript 库！

2013-04-08

mysql 手册 中文版
mysql 手册 中文版 很好地学习工具

2013-04-08

php 手册 中文版
php 手册 中文版 很好的学习工具

2013-04-08

Java语言编写计算器程序_swing界面
Java语言编写计算器程序_swing界面

2013-01-14

社交网络中的信任推荐和好友搜索过滤算法研究
社交网络中的信任推荐和好友搜索过滤算法研究

2013-01-14

Java网络爬虫简单实现
Java网络爬虫简单实现

2013-01-14

Windows Builder
Windows Builder pro for eclipse 3.6 一款基于Eclipse SWT技术上的双向Java Gui设计软件。具备SWT设计以及Swing设计两个主要功能。该软件会被作为一个插件镶嵌入Eclipse以及其他一些兼容的IDEs中

2012-05-06

谷歌成长21位重要人物
谷歌成长21位重要人物谷歌成长21位重要人物谷歌成长21位重要人物谷歌成长21位重要人物

2011-06-26

北京邮电大学ACM的分析语言
北京邮电大学ACM 北京邮电大学ACM北京邮电大学ACM北京邮电大学ACM北京邮电大学ACM北京邮电大学ACM北京邮电大学ACM北京邮电大学ACM北京邮电大学ACM北京邮电大学ACM

2011-06-26

2011年大学生创新实验计划项目立项启动会PPT
2011年大学生创新实验计划项目立项启动会PPT

2011-06-26

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章？
取消 删除