高级网络计算模式
文章平均质量分 75
饼干饼干圆又圆
这个作者很懒,什么都没留下…
展开
-
网络计算模式期末复习(五)
MapReduce是用于大规模数据集的并行运算,在面对节点失效的情况时能够保证大量的文件和数据依然可用,初始化时数据被分割成许多分块的小数据,这些数据都是以的形式存储,用户程序会分配一个Master进程和许多Worker进程。将要执行的问题拆解成Map和Reduce方式,先通过Map程序将数据切割成不相关的区块,分配给大量计算机达到分布运算的效果,再通过Reduce程序将结果汇整,输出开发者需要的结果。原创 2023-06-13 06:58:26 · 175 阅读 · 1 评论 -
网络计算模式期末复习(四)
感知层:包括二维码标签和识读器、RFID标签和读写器、摄像头、CPS(Cyber Physical Systems,网络化物理系统)、各种传感器、传感器网络(指由大量各类传感器节点组成的自治网络,具有自组织、自愈合的特点)、T2T&H2T&H2H终端和传感器网关等。负载均衡技术将网络的流量尽可能均匀地分配到几个能完成相同任务的服务器或网络节点上进行处理,避免部分网络结点过载而另一部分节点空闲的不利情况,即可以提高网络流量,又可以提高网络的整体性能。通过对各节点间的路由优化,实现信息的分发;原创 2023-06-13 06:56:16 · 446 阅读 · 0 评论 -
网络计算模式期末复习(三)
其目的通过在现有的Internet中增加一层新的网络架构,将网站的内容发布到最接近用户的网络“边缘”,使用户可以就近取得所需的内容,解决Internet网络拥挤的状况,提升用户访问网站的响应速度。把网络上的资源的存取像Hash表一样,可以简单而快速的进行put、get,主要受第一代P2P的影响,DHT更强调资源的存储而不管资源是否一致。peer指网络结点,在行为上是自由的,任意加入、退出,不受其它节点限制,匿名;在连接上是互联的,无论直接还是间接,任意两结点可建立逻辑连接,对应物理网上的一条IP路径。原创 2023-06-13 06:56:03 · 1154 阅读 · 0 评论 -
网络计算模式期末复习(二)
目标:Map-Reduce是用于大规模数据集的并行计算,在面对节点失效的情况时能够保证大量的文件和数据依然可用,初始化时数据被分割成许多分块的小数据,这些数据都是以的形式存储,用户程序会分配一个Master进程和许多Worker进程。任务分配:任务开始时,Master任务将用户程序的工作分成两种类型的任务(Map任务和Reduce任务),并将这些任务分配给相应的Workers。Hadoop是一个分布式的系统基础架构,用户可以充分利用集群进行高效的运算和存储。原创 2023-06-13 06:55:43 · 492 阅读 · 0 评论 -
网络计算模式期末复习(一)
IT鸿沟指的是当业务不断发展的时候,现有的IT支持平台的发展不能满足业务的需要,而当IT支持平台发展到可以支持业务的需要的时候,业务又有新的需求和发展,这样业务与IT之间持续存在一个鸿沟。网格计算是利用互联网将地理位置相对分散的计算机组成一个“虚拟的超级计算机”,“其中每一台参与计算的计算机就是一个节点”,而整个计算是由数以万计个“节点”组成的一张网格。网格计算在每个节点上安装中间件进行彼此间的连接,使用网格计算的用户需要提供计算资源。网格计算利用互联网上计算机的CPU闲置资源处理能力来解决大型计算问题。原创 2023-06-13 06:56:48 · 469 阅读 · 0 评论 -
高级网络计算模式复习大纲
按五层结构阐述按三层结构阐述CDN网络概念Akamai和Limelight内容路由实现机制DNS重定向机制的描述P2P的概念DHT的概念Pastry算法和Chord算法的比较什么是网格网格的五层沙漏模型OSGA云计算与网格计算的差别Hadoop基本原理描述MapReduce数据一致性理论C/S架构B/S架构如何描述IT鸿沟如何描述IT信息孤岛及其解决办法中间件的相关概念以及有哪些中间件原创 2023-06-13 06:56:23 · 92 阅读 · 0 评论 -
网络计算模式复习(五)
路由(Routing):在覆盖网上根据节点ID进行路由,将查询消息最终发送到目的节点。每个节点需要到其邻近节点的路由信息,包括节点ID、IP等。定位(Locating):节点ID和其存放的对中的K存在着映射关系,因此可以由K获得存放该对的节点ID。拓扑结构由节点ID和其存放的对中的K之间的映射关系决定。拓扑动态变化,需要处理节点加入/退出/失效的情况。原创 2023-06-05 06:53:39 · 59 阅读 · 0 评论 -
网络计算模式复习(七)
✓ 无线通信:Wi-Fi (IEEE 802.11ah)、蓝牙(IEEE 802.15.1)、ZigBee(IEEE 802.15.4)、无线短距通信 LoRa、无线远距通信 GPRS、无线近距通信 NFC、无线蜂窝通信2G、3G、4G,以及5G等。包括二维码标签和识读器、RFID标签和读写器、摄像头、CPS(Cyber Physical Systems,信息物理系统)、各种传感器、传感器网络(指由大量各类传感器节点组成的自治网络,具有自组织、自愈合的特。✓ 有线通信:以太网、串口通信技术等。原创 2023-05-18 21:28:03 · 440 阅读 · 0 评论 -
网络计算模式复习(六)
CDN的全称是Content Delivery Network,即内容分发网络。其目的通过在现有的Internet中增加一层新的网络架构,将网站的内容发布到最接近用户的网络“边缘”,使用户可以就近取得所需的内容,解决Internet网络拥挤的状况,提供用户访问网站的响应速度。从技术上全面解决由于网络带宽小、用户访问量大、网点分布不均等原因,解决用户访问网站的响应速度慢的根本原因。原创 2023-05-18 21:14:56 · 389 阅读 · 0 评论 -
网络计算模式复习(五)
节点ID分布采用环形结构。原创 2023-05-18 16:52:41 · 645 阅读 · 0 评论 -
网络计算模式复习(四)
P2P是一种分布式网络,网络的参与者共享他们所拥有的一部分硬件资源(处理能力,存储能力,网络连接能力,打印机等),这些共享资源需要由网络提供服务和内容,能被其它对等节点(Peer)直接访问而无需经过中间实体。在此网络中的参与者既是资源提供者,又是资源获取者。P2P:Peer to Peer对等网络peer指网络结点,在行为上是自由的——任意加入、退出,不受其它结点限制,匿名;在功能上是平等的——不管实际能力的差异;在连接上是互联的——直接/间接,任两结点可建立逻辑链接,对应物理网上的一条IP路径。原创 2023-05-18 14:32:33 · 714 阅读 · 0 评论 -
网络计算模式复习(三)
MapReduce模式的思想是将要执行的问题拆解成Map(映射)和Reduce(化简)的方式,先通过Map程序将数据切割成不相关的区块,分配给大量计算机处理达到分布运算的效果,再通过Reduce将程序结果汇整,输出开发者需要的结果。而分布式数据库(Big Table)是一个有序、稀疏、多维度的映射表,有良好的伸缩性和高可用性,用来将数据存储或部署到各个计算节点上。 网格:每一个组织自己控制和管理自身的资源,对虚拟化的依赖程度不如云计算高。 云计算:虽然不是必要的,但在实践中几乎成为不可缺少的元素。原创 2023-05-18 11:41:21 · 524 阅读 · 0 评论 -
网络计算模式复习(二)
网格计算在每个节点上安装中间件进行彼此间的连接,使用网格计算的用户需要参与提供计算机资源。网格计算利用互联网上计算机的CPU闲置资源处理能力来解决大型计算问题。优点:提供高效的资源共享服务,平衡多台计算机上的负载,可把程序放到最适合的位置上。目的:高性能计算网络:覆盖网络/应用层网络。原创 2023-05-18 09:35:31 · 362 阅读 · 0 评论 -
网络计算模式复习(一)
IT鸿沟指的是当业务不断发展的时候,现有的IT支持平台已经无法满足业务的需要,而当IT支持平台发展到可以支持业务的需要的时候,业务又有新的需求和发展,这样的业务与IT之间持续存在一个鸿沟。存在IT鸿沟的一个重要的原因就是企业中的信息孤岛问题。信息孤岛是指相互之间在功能上不关联、信息不共享以及信息与业务流程脱节的计算机应用系统。IT鸿沟的解决办法就是EAI(企业应用集成)。一套完整的EAI层次体系包括应用接口层、应用整合层、流程整合层和用户交互层。原创 2023-05-18 08:20:53 · 634 阅读 · 0 评论 -
物联网的体系架构
➢感知层:包括二维码标签和识读器、RFID标签和读写器、摄像头、CPS(Cyber Physical Systems,信息物理系统)、各种传感器、传感器网络(指由大量各类传感器节点组成的自治网络,具有自组织、自愈合的特点)、T2T&H2T&H2H终端和传感器网关等,感知层的主要作用是感知和识别物体,采集并捕获信息。➢网络层:网络层是物联网成为普遍服务的基础设施,包括各种通信网络与互联网形成的融合网络(异构网络),还包括物联网管理中心、信息中心等利用网络的能力对海量信息进行智能处理的部分。原创 2023-05-17 21:52:26 · 1285 阅读 · 0 评论 -
高级网络计算模式复习
为了保证节点M的退出/失效不影响系统中正在进行的查询过程,每个Chord节点都维护一张包括r个最近后继节点的后继列表。新节点N事先知道某个或者某些节点,并且通过这些节点初始化自己的指针表,也就是说,新节点N将要求已知的系统中某节点为它查找指针表中的各个表项。当Chord中某个节点M退出/失效时,所有在指针表中包含M的节点将相应指针指向节点M的后继节点,即大于M节点ID的第一个有效节点。节点ID和其存放的对中的K存在着映射关系,因此可以由K获得存放该对的节点ID。原创 2023-05-17 20:09:32 · 386 阅读 · 0 评论 -
网络计算模式(一)
综合当今众多CDN服务商的技术体系,无不受到当今世界两大CDN服务商,即 Akamai和LimeLight(以下简称LL)的技术架构影响。CDN:Content Delivery Network,即内容分发网络。使用CDN缓存后的网络访问过程。传统的未加缓存服务的访问过程。原创 2023-05-17 10:30:56 · 425 阅读 · 0 评论 -
网络计算模式复习(四)
分布式系统在不同节点的数据采用什么技术保证一致性,取决于应用对系统一致性的需求,在关系型数据管理系统中一般会采用悲观的方法(如加锁),这些方法代价比较高、对系统性能影响较大,而在一些强调性能的系统中则会采用乐观的方法。(分而治之)将要执行的问题拆解成Map(映射)和Reduce(化简)的方式,先通过Map程序将数据切割成不相关的区块,分配给大量计算机处理达到分布运算的效果,再通过Reduce程序将结果汇整,输出开发者需要的结果。另一类为事务参与者,一般包含多个,在数据存储系统中可以理解为数据副本的个数。原创 2023-05-04 17:23:00 · 504 阅读 · 0 评论 -
网络计算模式复习(三)
云计算:面向企业或单个用户,按需使用资源,按使用收费,如电、水、气等的使用方式一样,由单一的公司资源建立云计算环境,提供服务,资源可以是高性能设备,也可以是PC机。网格计算:面向工程,集中于解决大型复杂的计算问题,一项任务可由来自于不同成员贡献的资源共同完成,资源一般是高性能的计算、存储设备。关键需要的是计算和数据资源管理的综合,在访问模式中利用数据位置信息使数据移动的数据量最小,改善终端应用的性能和可扩展性。云计算:能处理和网络计算类似的应用,由于网络环境的不确定性,在高性能计算方面,云计算要稍逊一筹。原创 2023-05-04 16:27:24 · 403 阅读 · 0 评论 -
网络计算模式复习(二)
定义:网格计算是动态多机构虚拟组织中的一个协调的共享资源和解决问题的过程(Ian Foster定义)。在非集中控制环境下协同使用资源使用标准的、开放的、通用的协议(标准化)提供非凡的服务网格将网络上分布的资源聚合为一体,建立计算和数据处理的通用系统支持平台,实现资源共享和联合工作。资源:计算、数据、存储、设备、软件和人员等;本质:资源的共享和协同,统一和横向设计;技术:虚拟组织之间的资源共享和协同工作技术;方法:建立广泛的资源共享和协同的标准协议;最终目标:数字信息基础设施。原创 2023-05-04 15:35:58 · 512 阅读 · 0 评论 -
网络计算模式复习(一)
这种架构中,作为客户端的部分需要承受很大的压力,因为显示逻辑和事务处理都包含在其中,通过与数据库的交互(通常是SQL或存储过程的实现)来达到持久化数据,以此满足项目实际需要。定义:IT鸿沟指的是当业务不断发展的时候,现有的IT支持平台的发展不能满足业务的需要,而当IT支持平台发展到可以支持业务的需要的时候,业务又有新的需求和发展,这样业务与IT支持之间持续存在一个鸿沟。B/S架构中,显示逻辑交给了Web浏览器,事务处理逻辑放在了WebApp上,这样就避免了庞大的胖客户端,减少了客户端的压力。原创 2023-05-04 14:48:53 · 472 阅读 · 0 评论