第一阶段✦第三章☞信息系统集成专业技术知识(第8小节)

最新推荐文章于 2023-06-20 21:05:11 发布

嘉&年华

最新推荐文章于 2023-06-20 21:05:11 发布

阅读量3.6k

点赞数

分类专栏： # 系统集成项目管理工程师（中项）文章标签：其他

本文链接：https://blog.csdn.net/u011298909/article/details/124015289

版权

系统集成项目管理工程师（中项）专栏收录该内容

8 篇文章 5 订阅

订阅专栏

文章目录

0. 主要考点
1. 大数据（掌握）
2. 云计算（掌握）
3. 互联网+、智能制造（掌握）
4. 物联网（掌握）
5. 智慧城市（掌握）
6. 移动互联网（掌握）
7. 人工智能、区块链（掌握）
8. 习题练习总结

0. 主要考点

❶ 大数据
❷ 云计算
❸ 互联网+
❹ 物联网
❺ 智慧城市
❻ 移动互联

1. 大数据（掌握）

大数据（big data）,是指无法在可承受的时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要采用新处理方式才能获得更多智能的、深入的、有价值的信息，以期得到更强的决策力、洞察力和流程优化能力的海量、高增长率的多样化的信息资源。
大数据的来源包括网站浏览轨迹、各种文档和媒体、社交媒体信息、物联网传感信息、各种程序和App的日志文件等。大数据是指无法在一定时间内用传统数据库软件工具对其内容进行抓取、管理和处理的数据集合。

① 大数据有五V特点

❶ 大量性（Volume）
❷ 多样性（Variety）
❸ 价值性（Value）
❹ 高速性（Velocity）
❺ 真实性（Veracity）

大数据是以容量大、类型多、存取速度快、应用价值高为主要特征的数据集合。
在这里插入图片描述

② 大数据技术框架

在这里插入图片描述

③ 大数据关键技术

大数据所涉及的技术很多，主要包括数据采集、数据存储、数据管理、数据分析与挖掘四个环节。

❶ 数据采集，主要使用的技术是数据抽取工具ETL。
❷ 数据存储，主要有结构化数据、非结构化数据和半结构化数据的存储与访问。结构化数据一般存放在关系数据库，通过数据查询语言(SQL)来访问；非结构化(如图片、视频、doc文件等)和半结构化数据一般通过分布式文件系统的NoSQL (Not Only SQL)进行存储，比较典型的 NoSQL 有 Google 的 Bigtable> Amazon 的 Dynamo 和 Apache 的 Hbase。
❸ 数据管理，主要使用了分布式并行处理技术，比较常用的有MapReduce,编程人员借助MapReduce可以在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上。
❹ 数据分析与挖掘是根据业务需求对大数据进行关联、聚类、分类等钻取和分析，并利用图形、表格加以展示，与ETL一样，数据分析和挖掘是以前数据仓库的范畴，只是在大数据中得以更好的利用。 （核心）

在这里插入图片描述

HDFS：Hadoop分布式文件系统(HDFS)是适合运行在通用硬件上的分布式文件系统，是一个高度容错性的系统，适合部署在廉价的机器上。HDFS能提供高吞吐量的数据访问，非常适合大规模数据集上的应用。

HBase：HBase是一个分布式的、面向列的开源数据库，该技术来源于Fay Chang所撰写的Google论文“Bigtable：一个结构化数据的分布式存储系统"，HBase在Hadoop之上提供了类似于Bigtable的能力。利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群。HBase不同于一般的关系数据库，它是一个适合于非结构化数据存储的数据库。另一个不同的地方是HBase基于列的而不是基于行的模式。

MapReduce：MapReduce是一种编程模型，用于大规模数据集(大于1TB)的并行运算。概念“Map(映射)”和“Reduce (归约)”，和它们的主要思想，都是从函数式编程语言里借来的。它极大地方便了编程人员在不会分布式并行编程的情况下，将自己的程序运行在分布式系统上，从而实现对HDFS和HBase上的海量数据分析。

Chukwa：Chukwa是一个开源的用于监控大型分布式系统的数据收集系统。这是构建在Hadoop的HDFS和Map/Reduce框架之上的，继承了 Hadoop的可伸缩性和鲁棒性。Chukwa还包含了一个强大而灵活的工具集，可用于展示、监控和分析已收集的数据。

④ 大数据应用（了解）

大数据受到越来越多行业巨头们的关注，使得大数据渗透到更广阔的领域，除了电商、电信、金融这些传统数据丰富、信息系统发达的行业之外，在政府、医疗、制造和零售行业都有其巨大的社会价值和产业空间。

❶ 互联网和电子商务行业
该行业应用最多的是用户行为分析，主要研究对象用户在互联网、移动互联网上的访问日志、用户主体信息和外界环境信息，从而挖掘潜在客户，进行精准广告或营销。
❷ 电信/金融
通过对用户的通讯、流量、消费等信息进行分析，判断用户的消费习惯和信用能力,可以给用户设计更贴合的产品，提升产品竞争力。
❸ 政府
首先，政府通过对大数据的挖掘和实时分析，可有效提高政府决策的科学性和时效性，并且能帮助政府有效削减预算开支。其次，借助大数据可以使政府变得更加开放、透明和智慧。大数据可以使政府更清楚地了解公民的意愿和想法，可以提升公民的价值,还可以通过引导社会的舆论，为社会公众提供更好的服务，树立更好的政府形象。
❹ 医疗
❺ 制造
从前的制造业通常以产品为导向，以降低生产成本来决定制造业的生存和发展。而如今如果继续以这种理念来维持企业的发展，必将导致制造业的暗淡。越来越多的制造业早已明白，个性化定制将是发展的趋势，所以制造业需要处理好大数据，通过对海量数据的获取，挖掘和分析，把握客户的需求，从而交付客户喜欢的产品。

2. 云计算（掌握）

云计算的定义：指基于互联网的超级计算模式，通过互联网来提供大型计算能力和动态易扩展的虚拟化资源。云是网络、互联网的一种比喻说法。云计算是一种大集中的服务模式。
用一句话概括云计算就是通过网络提供可动态伸缩的廉价计算能力。

① 云计算特点

❶ 超大规模：规模大，动辄几十万甚至上百万台服务器。
“云”具有相当的规模，Google云计算已经拥有100多万台服务器，Amazon、IBM、微软、Yahoo、阿里等的“云”均拥有几十万台服务器。企业私有云一般拥有数百上千台服务器。

❷ 虚拟化：支持用户在任意位置、使用各种终端获取应用服务。用户无需了解、也不用担心应用运行的具体位置。

❸ 高可靠性：数据多副本容错、计算节点同构可互换等措施来保障服务的高可靠性。
“云”使用了数据多副本容错、计算节点同构可互换等措施来保障服务的高可靠性，使用云计算比使用本地计算机可靠。

❹ 通用性：可以同时支持不同的应用运行。
云计算不针对特定的应用，在“云”的支撑下可以构造出千变万化的应用，同一个“云”可以同时支撑不同的应用运行。

❺ 高可扩展性：可以动态伸缩，满足应用和用户规模增长的需要。

❻ 按需服务：是一个庞大的资源池，用户按需购买；云可以像自来水、电、煤气那样计费。

❼ 极其廉价：使大量企业无需负担日益高昂的数据中心管理成本。

❽ 潜在危险性：云服务提供者一般是私人机构（企业），也有敏感数据被泄露的风险。

② 云计算发展现状（了解）

从计算架构来看，云计算并不算是新概念。根据应用方式，计算机的计算技能可分为3个阶段：计算时代、网络时代、云时代。
❶ 计算时代：一般从上世纪60年代到上世纪末，典型特征是利用单个计算机的计算能力来完成任务。计算机可以为大型集群式计算机、小型计算机或个人用微机。

❷ 网络时代：一般从上世纪末到2015年，典型特征是借助互联网，将个人计算机和移动设备结合起来，进行信息的交流与共享。

❸ 云时代：一般指从近两年国外Amazon开始到国内阿里云等云平台商兴起，越来越多的应用放到云平台上,.而昭示云时代的开始。从架构上云时代可以看做是计算时代的扩展，计算时代的大型机换成了云时代的数据中心，局域网换成了互联网，无计算能力的终端机换成了丰富多彩的具有计算能力的个人电脑或移动终端等。

③ 云计算架构

从对外提供的服务能力来看，云计算的架构可以分为3个层次：基础设施即服务(laaS)、平台即服务(PaaS)、软件即服务(SaaS)。
❶ 基础设施即服务(laaS)：指消费者通过网络可以从云计算中心获取完善的计算机基础设施服务，例如虚拟主机、存储服务等，典型厂家有Amazon、阿里云等。laaS向用户提供计算机能力、存储空间等基础设施的服务。这种服务模式需要较大的基础设施投入和长期运营管理经验。如果将云计算比作一台计算机，IaaS就相当于计算机的主机等硬件。

❷ 平台即服务(PaaS)：指为云计算上各种应用软件提供服务的平台应用，其作用类似于个人计算机的操作系统，也包括一些增强应用开发的“开发包”，典型厂家有GoogleApp Engine、MicrosoftAzure、阿里 Aliyun Cloud Enginee、百度 BaiduAppEnginee 等。PaaS向用户提供虚拟的操作系统、数据库管理系统、Web应用等平台化的服务。PaaS服务的重点不在于直接的经济效益，而更注重构建和形成紧密的产业生态。

❸ 软件即服务(SaaS)：是一种通过Intemet提供软件的模式，用户无需购买软件，而是向提供商租用基于Web的软件，来管理企业经营活动。类似于个人计算机中各种各样的应用软件。提供SaaS服务的厂家越来越多，典型的如国外的Salesforce、国内的淘宝等。SaaS向用户提供应用软件（如CRM、办公软件等）、组件、工作流等虚拟化软件的服务。SaaS采用Web技术和SOA架构，通过Intemet向用户提供多租户、可定制的应用能力，大大缩短了软件产业的渠道链条，减少了软件升级、定制和运行维护的复杂程度，并使软件提供商从软件产品的生产者转变为应用服务的运营者。

④ 云计算应用

❶ 从服务层次来看，如前所述，云计算的应用可分为基础设施即服务(laaS)、平台即服务(PaaS)、软件即服务(SaaS) 3个层次。

❷ 从应用范围来看，云计算又可分为公有云、私有云和混合云。

❸ 从行业来看，在国内云计算应用较多的行业包括金融、政府、电子商务、游戏、音视频网站、移动应用、门户和社区等。随着数据安全性增强、网络带宽增长和云计算应用模式的成熟，云计算将在更多行业和领域得到应用。

⑤ 云计算的关键技术

云计算技术架构包括云计算基础设施和云计算操作系统，其中云计算基础设施由数据中心基础设施和信息网络存储资源组成，云计算操作系统负责调度、管理和控制相关资源，支持对外提供IaaS、PaaS、SaaS等服务。
在这里插入图片描述
❶ 基础设施关键技术
云计算基础设施关键技术包括：服务器、网络、数据中心相关技术。

❷ 操作系统关键技术
云计算操作系统的主要关键技术包括资源池管理技术和向用户提供规模存储、计算能力的分布式任务和数据管理技术。
资源池管理技术主要实现对物理资源、虚拟资源的统一管理，并根据用户需求实现虚拟资源的自动化生成、分配和迁移。当局部物理主机发生故障或需要进行维护时，运行在此主机上的虚拟机应该可以动态地迁移到其他物理主机（即热迁移技术），并保证用户业务连续。
分布式任务管理技术实现基于大规模硬件资源上地分布式海量计算，并支持对结构化与非结构化地数据进行存储和管理。

3. 互联网+、智能制造（掌握）

“互联网+”就是“互联网+各种传统行业”，但并不是简单地两者相加，而是利用信息通信技术以及互联网平台，让互联网与传统行业进行深度融合，创造新地发展生态。此类协同制造公共服务平台多采用分布式系统，电子上午、互联网金融、在线旅游、在线影视、在线房产等行业使“互联网+”地杰作。互联网+行动可以推动传统产业的转型升级。

信息管理系统（CPS）是一个综合计算、网络和物理环境的多维复杂系统，通过3C技术的有机融合与深度协作，实现大型工程系统的实时感知、动态控制和信息服务；该系统主要应用于智能制造领域，是智能制造的核心。

在这里插入图片描述

互联网+有六大特征：
❶ 跨界融合
❷ 创新驱动
❸ 重塑结构
❹ 尊重人性
❺ 开放生态
❻ 连接一切

4. 物联网（掌握）

物联网定义：即“物物相联之网”，指通过射频识别（RFID）、红外线感应器、全球定位系统、激光扫描器等信息传感设备，按约定协议，把物与物、人与物进行智能化连接，进行信息交换和通讯，以实现智能化识别、定位、跟踪、监控和管理的一种新兴网络。从计算机的系如同处理来划分，可分为独立计算、互联网和物联网时代。

物联网不是一种物理上独立的完整网络，而是架构在现有互联网或下一代公网或专网基础上的联网应用和通信能力，是具有整合感知识别、传输互联和计算处理等能力的智能型应用。
在这里插入图片描述

在这里插入图片描述
各个层次所用的公共技术包括：编码技术、标识技术、解析技术、安全技术、中间件技术。

物联网关键技术：感知层作为物联网架构的基础层面，主要技术包括：产品和传感器（条码、RFID、传感器等）自动化识别技术、无线传输技术（WLAN、Bluetoth、ZigBee、UWB）、自组织组网技术、中间件技术。

物联网应用：
智能微尘、智能电网、智慧物流、智能家居、智能交通、智慧农业、环境保护、医疗健康、城市管理、金融服务保险业、公共安全。

传感器是物联网产业链中需求量最大和最基础的环节。

5. 智慧城市（掌握）

在这里插入图片描述
智慧城市建设主要包括以下几部分：
❶ 通过传感器或信息采集设备全方位地获取城市系统数据；
❷ 通过网路将城市数据关联、融合、处理、分析为信息；
❸ 通过充分共享、智能挖掘将信息变成知识
❹ 结合信息技术，把知识应用到各行各业形成智慧。

典型应用：公用事业智能化、城市智能交通、城市应急联动。

在这里插入图片描述
智慧城市建设模型包括五层（功能层）和对建设有约束关系的三大支撑体系。
➢ 五层功能层：
❶ 物联网感知层：提供对城市环境的智能感知能力，通过各种信息采集设备、各类传感器、监控摄像机、GPS终端等实现对城市范围内的基础设施、大气环境、交通、公共安全等方面信息采集、识别和监测。