自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(4)
  • 资源 (7)
  • 收藏
  • 关注

原创 深入Spark内核:任务调度(4)-Task

sdfds

2015-04-17 00:16:07 752

原创 深入Spark内核:任务调度(3)-TaskScheduler

TaskScheduler相较于DAGScheduler来说是一个低级的任务调度器(low-level task scheduler),更加准确的来说它更像是一个任务调度器接口。TaskScheduler的实现类只有一个TaskSchedulerImpl。TaskScheduler核心工作负责任务的发送和任务执行过程的监控,而一个TaskScheduler只为一个SparkContext实例服务,

2015-04-11 16:43:53 1636

原创 深入Spark内核:任务调度(2)-DAGScheduler

DAGScheduler面向stage的调度(stage-oriented scheduling)的高级调度器,为每个job的不同stage计算DAG,跟踪哪些RDD和stage被物化并且发现运行job的最小的调度策略,然后以taskset为单位提交(submitTasks)给TaskScheduler。除了提交stage的DAG外, DAGScheduler基于cache的当前状态来决定每个

2015-04-08 14:51:45 1519

原创 深入Spark内核:任务调度(1)-基本流程

SparkContext是Spark应用的入口并负责和整个集群的交互,创建RDD,累积量(accumulators variables)和广播量(broadcast variables)等, 理解spark的任务调度基本流程,就需要从SparkContext开始。下图是官网Spark的架构图:       DriverProgram即用户提交的程

2015-04-08 14:14:15 1021

知识图谱研究进展

随着大数据时代的到来,知识工程受到了广泛关注,如何从海量的数据中提取有用的知识,是 大数据分析的关键。知识图谱技术提供了一种从海量文本和图像中抽取结构化知识的手段,从而具有 广阔的应用前景。本文首先简要回顾知识图谱的历史,探讨知识图谱研究的意义。其次,介绍知识图 谱构建的关键技术,包括实体关系识别技术、知识融合技术、实体链接技术和知识推理技术等。然后, 给出现有开放的知识图谱数据集的介绍。最后,给出知识图谱在情报分析中的应用案例。

2018-08-22

微机原理与接口技术PPT

微机原理与接口技术内容主要包括微机系统概述、典型微处理器、指令系统、汇编语言程序设计、存储器系统、微机总线与输入/输出技术、中断系统、典型接口芯片及其应用等内容。

2010-03-11

数据库和数据结构模拟试题

本资源有三套数据库模拟试题和三套数据结构模拟试题以及一套数据结构期末试题,另附有试题答案

2009-06-23

计算机硬件级组成原理

本课程介绍计算机系统的组织结构,进而介绍较新的计算机组织结构体系。使学生从逻辑电路、数据在计算机内的表示和运算算法、指令系统和汇编语言程序设计、计算机硬件系统的基本组成和指令执行过程的控制与实现、计算机系统最底层硬软件的配合与功能划分等多个层次,系统地了解计算机组成的基本原理与内部运行机制。努力提高学生在计算机硬件设计与实现方面的能力,适当认识提高计算机的部件和整机硬件性能的各种可行途径;使学生对计算机系统的最底层硬件与软件的配合关系以及功能划分等诸多方面有基本和正确的认识;并且使学生了解当前计算机系统最新的研究与发展趋势。

2009-06-22

数据结构 C语言 数据结构基础

1.1 数据结构 • 1.2 基本概念和术语 • 1.3 抽象数据类型 • 1.4 算法和算法分析

2009-04-10

Asp.Net Programing

欢迎访问E书吧:http://www.eshuba.com 本书籍由E书吧收集、整理,谢谢您的支持! 资料源于网上,版权属于原作者。请购买纸质书籍支持作者! 本站只是为方便网友购买正版之前做参考,如果侵犯您的版权,请给我们来信jayee@126.com,我们会及时处理。谢谢! E书吧 http://www.eshuba.com

2009-04-10

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除