云计算札记

云计算商业变革与云产业生态

互联网的变革—

对国家的影响

• 78年经济改革
• 89年中国第一个互联网五年计划
• 91年美国将中国互联网纳入
• 94年中国网络接入互联网
• 97年大众接入互联网
• 99年银海威第一家互联网运营商 大规模使用

对企业的影响

• 提高效率

对个人的影响

• 个人融入世界

数据单位

EB>PB>TB>GB>MB>KB>Byte

传统IT服务

本地化服务

特色

• 超大规模用户—

• 海量数据—

• 快速增长和变化—

云计算

什么是云计算？
就是自动化和规模化在IT行业的服务化体现

云计算5大特征

1. 按需使用
2. 泛在接入
3. 资源池
4. 灵活有弹性
5. 服务可度量

云计算的四类部署模式

私有云、公有云、混合云、社区云（）

三种部署模式

Iaas、Paas、Saas

虚拟化

虚拟机四大特点

1. 分区
2. 隔离
3. 封装
4. 独立

服务器

服务器基本体系结构

组件	指标	功能
CPU	北桥	总体性能取决于北桥，负责高速组件通信，内存、PCIe、网卡、存储
CPU	南桥	负责慢速设备连接，BMC(管理控制芯片）、USB、鼠标、键盘
系统总线	总线频率（MHz）	总线速度的衡量
系统总线	总线带宽（MB/s）	总线速度的衡量
系统总线	总线位数（Bit）	总线速度的衡量
系统总线	并行总线和串行总线

服务器机架高度单位：U，如1U、2U、4U

CPU技术

VT/AMD-V（Virtual technology）技术 是CPU支持操作系统虚拟化必须要有的技术

CPU的缓存：

1. L1：一般为128~256KB
2. L2：一般为1M，每个CORE有自己的L2
3. L3：一般为4-12M，由本CPU所有CORE共享
   L2/L3封装在CPU里

PCIe技术

1. RAID卡和SCSI卡不支持热拔插
2. FC HBA和NIC网卡支持热拔插

BIOS

BIOS对服务器硬件的诊断

1. NOPOST——服务器不能完成自检
   • 电源指示灯亮起后熄灭，屏幕不亮
   • 电源指示灯一直亮，屏幕不亮，键盘不能操作
   • 屏幕显示POST画面，不能完成POST
2. NO POWER——服务器不上电
3. NO Video——服务器没显示
   • 电源灯一直亮、屏幕不亮、键盘可以用
4. NO Boot——不能启动操作系统
   • 屏幕亮，完成自检，不能进入操作系统

Huawei E9000 刀片服务器

12U高 8个全宽位，16个半宽位

存储

存储技术横向对比

模式	特点	解决问题
传统	硬盘在服务器内	-硬盘成为系统瓶颈 -容量小 -可靠性差 -利用率低 -本地存储，数据分散
DAS	外部硬盘阵列	逻辑磁盘阵列，增加磁盘容量，解决容量问题
DAS	智能硬盘阵列	控制器含RAID功能，大容量cache，解决系统性能瓶颈和容量问题
SAN、NAS	存储区域网络	解决可靠性、本地存储及空间利用率问题

IDC存储功能趋势：1. 集中存储，2.海量空间，3.快速I/O

主机内部存储系统

主机内部存储环境：设备驱动到存储设备的指令

- SCSI指令
- iSCSI指令
- FC指令

存储卡：

• 以太网卡
• 硬件TOE网卡
• iSCSI HBA卡、FC HBA卡

硬盘

硬盘类型	转速（RPM）	串行/并行
SATA	7200	串行
NL-SAS	7200	串行
SAS	15000/10000	串行
SSD	NA	串行

IOPS 每秒的输入输出量

RAID

  RAID0 数据条带化，无校验
  RAID1 数据镜像，无校验
  RAID5 数据条带化，校验信息分布式存放

RAID技术对比

RAID级别	RAID0	RAID1	RAID5	RAID10
容错性	无	有	有	有
冗余类型	无	复制	奇偶校验	复制
读性能	高	低	低	一般
写性能	高	低	低	一般
最小硬盘数	2块	2块	3块	4块
可靠性	★	★★★★	★★★	★★★★
性能	★★★★	★★★★	★★★	★★★★
成本	★★★★	★★	★★★	★★

空间利用率: RAID5明显优于RAID10
可靠性: RAID5低于RAID10
性能： 大文件读写RAID5性能明显好于RAID10，业务以随机小数据块读写RAID10为最优选择

RAID2.0优势

系统可靠性
快速精简重构
自动负载均衡

网络存储

常见的存储网络类型

DAS NAS SAN

CIFS和NFS对比

如果文件系统已经设置为CIFS共享，则此文件系统只能设置为只读的NFS共享
如果文件系统已经设置为NFS共享，则此文件系统只能设置为只读的CIFS共享

协议	传输协议	客户端要求	故障影响	效率	支持OS
CIFS	TCP/IP	操作系统集成，无需额外添加软件	大	高	Windows
NFS	TCP或UDP	需要额外软件	小，可自恢复交互过程	低	Linux、Unix

FCoE协议

以太网光纤通道：允许在应通信线缆上传输LAN和FC SAN通信，融合网络可以支持LAN和SAN数据类型，减少数据中心设备和线缆数量，同时降低供电和制冷负载，收敛成一个统一的网络后，有助于降低管理负担。
FCoE把FC帧封装在以太网帧中，允许LAN和SAN的业务流量在同一个以太网中传送。

华为云计算3+1解决方案

桌面云解决方案FusionAccess
大数据平台FusionInsight 应用创新Paas平台FusionStage
云操作系统FusionSphere（FusionCloud）

FusionSphere解决方案构架

FusionCompute动态资源调度
特点：

1. 跨资源池动态调整计算资源
2. 支持基于设定的规则预先分配资源
3. 围绕业务与应用需求进行系统规划
4. 与DPM结合

应用价值：
5. IT系统与业务需求相对应
6. 动态调度提升资源使用效率和管理效率
7. 全自动化，降低维护成本

FusionCompute动态电源管理
特点：
8. 系统自动选择适合的物理机上下电，减小迁移VM数量
9. 保证小部分物理机处理休眠态，以快速满足新增业务所需资源

应用价值：

1. 晚上业务量降低时，自动合并虚拟机，腾出物理机下电
2. 白天业务早上升时，自动商店物理机并迁移重载物理机上的虚拟机到新上电物理机

eBackup
统一云备份服务
最多支持10000台虚拟机的备份和恢复
Rainbow：端到端迁移工具及服务支持

数据库

数据库基础二大类

1. 菲关系型数据库
2. 关系型数据库

ACID
原子性
一致性
隔离性
持久性

关系型数据库

数据库是一个数据集合，按一定格式组织、存储和处理数据。
数据库系统的特征：

1. 集中控制
2. 数据共享
3. 减少冗余
4. 一致性和完整性
5. 数据独立性

关系型数据库应用分类

1. OLTP 联机事务处理：如电子商务系统、银行
2. OLAP 联机分析处理：如数据仓库

常用的数据库对象——约束

1. Primary Key
2. Foreign key
3. Unique
4. check
5. Not Null

数据库逻辑结构：

表空间》段》区》块

数据库启动过程：

Shutdown》nomount》mount》open

菲关系型数据库

分类：

类型	举例	数据模型

IP网络基础

Internet简史

1970s产生

1990s 进入中国

名词解释

名词	解释	英文
Lan	局域网	local area network
Wan	城域网	wide area network
Ran	无线网	radio area network
San	区域存储网络	storage area network
Fan	光纤接入网	Fabric access network

数据通信协议基础

ISO组织创立 OSI RM模型（Open System Interconnection Reference Model）

OSI模型

层次	功能
应用层	应用操作
表示层	应用表示
会话层	应用于下层沟通
传输层	TCP/UDP
网络层	IP
数据链路层	MAC
物理层	1

TCP/IP 模型

层次	实际表示	封装	功能	主要设备
应用层		PDU
传输层	TCP/UDP	Segment 段
网络层	IP	Packet 包
数据链路层	MAC/LLC	Frame 帧	MAC定义、差错验证	L2交换机、网桥
物理层	CSMA/CD	Bit 比特流	定义接口、电压电缆、传输距离、传输介质	集线器HUB 中继器

• MAC地址构成
  48位构成，前24位代表设备厂商、后24位为自行分配序列号
  00e0f0.0123456

文字类、视频类数据基本用TCP协议，语音类一般都用UDP

VLAN

作用： 隔离广播域，解决广播风暴问题

VLANID：0-4095 总共可用4096个，0为默认VLANID

标准：802.1Q IEEE 1996年

VLAN tag：

参数	值	含义
TPID	0X8100	唯一值
Priority
CFI	0，1	0，标准MAC地址封装；1，格式不标准
VLANID	0~4095	标记一个VLAN

VLAN接口类型：

1. access接口 主机接交换机，出入交换机口

   • 当数据不带VLANID
     • 给数据加默认VLAN值——PVID。
     • 当数据出交换机的时候，去除PVID
   • 当数据带VLANID
     • 不同，拒绝进入
     • 相同，让数据进来，出去的时候剥去PVID

2. Trunk接口 交换机之间

   • 当数据不带VLANID

     • 数据进来时候 打上一个默认PVID
     • 如果PVID相同，通行，不同，拒绝通行

   • 数据带VLANID

     • 比较列表，在列表里就通行，不再就拒绝
     • 出交换机，在列表里剥去PVID，不再列表里直接走

IP地址

分类：5类,A,B,C,D,E

掩码 255.255.255.0

ARP协议

ARP request
ARP reply

ICMP协议

 PIN包

TCP/UDP端口号

分辨不同应用程序

常见端口号

协议	端口号
HTTP	80
FTP	20/21
Telnet	23
POP3,SMTP	25
DNS	53
TFTP	69
SNMP	161/162

TCP三次握手

A->B SYN

B->A SYN-ACK

A->B ACK

    IP协议分两类
    
    - IGP inner gateway protocl 内部网关协议
        OSPF、ISIS、rip
    - EGP 外部网关协议
        BGP

    AS 自治域

    - 源端和目的端在同一个AS内使用IGP

    - 源端和目的端在不同AS种使用EGP

    路由协议

    > OSPF
    > ISIS 
    > BGP

SDN

software define network

转控分离，集中控制

SDN架构

层级	功能接口
应用层	对下：API接口
控制层	实体软件：AC-WAN，对上：SDN控制器北向接口restful，对下：SDN控制器南向接口netconf
（普通交换机）部署openflow	下发业务用
物理层

SDN由ONF提出

协议openflow 使各厂商可以相互识别设备

通过网管软件搜集底层网络信息（EMS）

EMS将信息提供给NETMatrix模块

工程师通过NETMatrix得到业务指导书

将业务指导书发给SDN控制器AC-WAN得出配置流表

将openflow部署在普通交换机上（SSL,FL）