磁盘管理和文件系统-CSDN博客

第五周知识总结

主要的知识点包括磁盘存储和文件系统。

一.磁盘存储和文件系统

1.设备文件

磁盘设备的设备文件命名：/dev/DEV_FILE
SCSI, SATA, SAS, IDE,USB: /dev/sd
虚拟磁盘：/dev/vd 、/dev/xvd
不同磁盘标识：a-z,aa,ab…
/dev/sda, /dev/sdb, ...
同一设备上的不同分区：1,2, ...
/dev/sda1, /dev/sda5
硬盘存储术语
head：磁头
track：磁道
cylinder：柱面 sector：扇区，512bytes

2.CHS和LBA

CHS
采用24bit位寻址
其中前10位表示cylinder，中间8位表示head，后面6位表示sector
最大寻址空间8GB

LBA（logical block addressing） LBA是一个整数，通过转换成CHS格式完成磁盘具体寻址
ATA-1规范中定义了28位寻址模式，以每扇区512位组来计算，ATA-1所定
义的28位LBA上限达到128 GiB。2002年ATA-6规范采用48位LBA，同样以
每扇区512位组计算容量上限可达128 Petabytes
由于CHS寻址方式的寻址空间在大概8GB以内，所以在磁盘容量小于大概8GB
时，可以使用CHS寻址方式或是LBA寻址方式；在磁盘容量大于大概8GB时，则
只能使用LBA寻址方式

3.使用分区空间

分区
两种分区方式：MBR，GPT
MBR: Master Boot Record，1982年，使用32位表示扇区数，分区不超过2T
如何分区：按柱面
0磁道0扇区：512bytes
446bytes: boot loader
64bytes：分区表，其中每16bytes标识一个分区
2bytes: 55AA
MBR分区中一块硬盘最多有4个主分区，也可以3主分区+1扩展(N个逻辑分区)
MBR分区结构
硬盘主引导记录MBR由4个部分组成
主引导程序（偏移地址0000H--0088H），它负责从活动分区中装载，并运行
系统引导程序
出错信息数据区，偏移地址0089H--00E1H为出错信息，00E2H--01BDH全为
0字节
分区表（DPT,Disk Partition Table）含4个分区项，偏移地址01BEH--01FDH,
每个分区表项长16个字节，共64字节为分区项1、分区项2、分区项3、分区项4
结束标志字，偏移地址01FE--01FF的2个字节值为结束标志55AA

GPT分区
GPT:GUID（Globals Unique Identifiers） partition table 支持128个分区，
使用64位，支持8Z（ 512Byte/block ）64Z （ 4096Byte/block）
使用128位UUID(Universally Unique Identifier) 表示磁盘和分区 GPT分区表
自动备份在头和尾两份，并有CRC校验位
UEFI (统一扩展固件接口)硬件支持GPT，使操作系统启动

管理分区
列出块设备
• lsblk
创建分区使用：
• fdisk 创建MBR分区
• gdisk 创建GPT分区
• parted 高级分区操作
重新设置内存中的内核分区表版本
•partprobe
parted命令
parted的操作都是实时生效的，小心使用
用法：parted [选项]... [设备 [命令 [参数]...]...]
parted /dev/sdb mklabel gpt|msdos
parted /dev/sdb print
parted /dev/sdb mkpart primary 1 200 （默认M）
parted /dev/sdb rm 1
parted –l 列出分区信息

gdisk /dev/sdb 类fdisk 的GPT分区工具
fdisk -l [-u] [device...] 查看分区
fdisk /dev/sdb 管理分区
子命令：
p 分区列表
t 更改分区类型
n 创建新分区
d 删除分区
v 校验分区
u 转换单位
w 保存并退出
q 不保存并退出

同步分区表
查看内核是否已经识别新的分区
cat /proc/partations
centos6通知内核重新读取硬盘分区表
新增分区用
partx -a /dev/DEVICE
kpartx -a /dev/DEVICE -f: force
删除分区用
partx -d --nr M-N /dev/DEVICE
CentOS 5，7: 使用partprobe
partprobe [/dev/DEVICE]

4.文件系统

2.创建文件系统

2.1.mkfs命令：

(1) mkfs.FS_TYPE /dev/DEVICE
ext4
xfs
btrfs
vfat
(2) mkfs -t FS_TYPE /dev/DEVICE
-L 'LABEL' 设定卷标

2.2.创建ext文件系统

mke2fs：ext系列文件系统专用管理工具
-t {ext2|ext3|ext4} 指定文件系统类型
-b {1024|2048|4096} 指定块大小
-L ‘LABEL’ 设置卷标
-j 相当于 -t ext3
mkfs.ext3 = mkfs -t ext3 = mke2fs -j = mke2fs -t ext3
-i # 为数据空间中每多少个字节创建一个inode；不应该小于block大小
-N # 指定分区中创建多少个inode
-I 一个inode记录占用的磁盘空间大小，128---4096
-m # 默认5%,为管理人员预留空间占总空间的百分比
-O FEATURE[,...] 启用指定特性
-O ^FEATURE 关闭指定特性

tune2fs：重新设定ext系列文件系统可调整参数的值
-l 查看指定文件系统超级块信息；super block
-L 'LABEL’ 修改卷标
-m # 修预留给管理员的空间百分比
-j 将ext2升级为ext3
-O 文件系统属性启用或禁用, –O ^has_journal
-o 调整文件系统的默认挂载选项，–o ^acl
-U UUID 修改UUID号 dumpe2fs：
将磁盘块分组管理
-h：查看超级块信息，不显示分组信息

2.3.文件系统检测和修复

常发生于死机或者非正常关机之后
挂载为文件系统标记为“no clean” 注意：一定不要在挂载状态下修复
fsck: File System Check
fsck.FS_TYPE
fsck -t FS_TYPE
-p 自动修复错误
-r 交互式修复错误
FS_TYPE 一定要与分区上已经文件类型相同
e2fsck：ext系列文件专用的检测修复工具
-y 自动回答为yes
-f 强制修复

2.4.挂载

4.1.挂载:将额外文件系统与根文件系统某现存的目录建立起关联关系，进而使得此
目录做为其它文件访问入口的行为
卸载:为解除此关联关系的过程
4.2.用mount命令挂载文件系统
挂载方法：mount DEVICE MOUNT_POINT
mount：通过查看/etc/mtab文件显示当前已挂载的所有设备
mount [-fnrsvw] [-t vfstype] [-o options] device dir
device：指明要挂载的设备；
(1) 设备文件：例如/dev/sda5
(2) 卷标：-L 'LABEL', 例如 -L 'MYDATA'
(3) UUID, -U 'UUID'：例如 -U '0c50523c-43f1-45e7-
85c0-a126711d406e'
(4) 伪文件系统名称：proc, sysfs, devtmpfs, configfs
dir：挂载点
事先存在，建议使用空目录
进程正在使用中的设备无法被卸载

4.3.mount常用命令选项
-t vsftype 指定要挂载的设备上的文件系统类型
-r readonly，只读挂载
-w read and write, 读写挂载
-n 不更新/etc/mtab，mount不可见
-a 自动挂载所有支持自动挂载的设备(定义在了/etc/fstab文件
中，且挂载选项中有auto功能) -L 'LABEL' 以卷标指定挂载设备
-U 'UUID' 以UUID指定要挂载的设备
-B, --bind 绑定目录到另一个目录上
查看内核追踪到的已挂载的所有设备
cat /proc/mounts
-o options：(挂载文件系统的选项)，多个选项使用逗号分隔
async 异步模式 sync 同步模式,内存更改时，同时写磁盘
atime/noatime 包含目录和文件
diratime/nodiratime 目录的访问时间戳
auto/noauto 是否支持自动挂载,是否支持-a选项
exec/noexec 是否支持将文件系统上运行应用程序
dev/nodev 是否支持在此文件系统上使用设备文件
suid/nosuid 是否支持suid和sgid权限
remount 重新挂载
ro 只读 rw 读写
user/nouser 是否允许普通用户挂载此设备，/etc/fstab使用
acl 启用此文件系统上的acl功能
loop 使用loop设备
 defaults：相当于rw, suid, dev, exec, auto, nouser, async

2.5.文件挂载配置文件

 /etc/fstab每行定义一个要挂载的文件系统
 1、要挂载的设备或伪文件系统
设备文件
LABEL：LABEL=""
UUID：UUID=""
伪文件系统名称：proc, sysfs
 2、挂载点  3、文件系统类型：ext4，xfs，iso9660，nfs，none
 4、挂载选项：defaults ，acl，bind
 5、转储频率：0：不做备份 1：每天转储 2：每隔一天转储
 6、fsck检查的文件系统的顺序：允许的数字是0 1 2
0：不自检
1：首先自检；一般只有rootfs才用
2：非rootfs使用

2.6.挂载交换分区

基本设置包括：
• 创建交换分区或者文件
• 使用mkswap写入特殊签名
• 在/etc/fstab文件中添加适当的条目
• 使用swapon -a 激活交换空间
启用：swapon
swapon [OPTION]... [DEVICE]
-a：激活所有的交换分区
-p PRIORITY：指定优先级
/etc/fstab 在第4列中：pri=value
禁用：swapoff [OPTION]... [DEVICE]

4.常用工具

工具dd
拷贝内存资料到硬盘
dd if=/dev/mem of=/root/mem.bin bs=1024
将内存里的数据拷贝到root目录下的mem.bin文件
从光盘拷贝iso镜像
dd if=/dev/cdrom of=/root/cd.iso
拷贝光盘数据到root文件夹下，并保存为cd.iso文件
销毁磁盘数据
dd if=/dev/urandom of=/dev/sda1
利用随机的数据填充硬盘，在某些必要的场合可以用来销毁数据，执行此操作
以后，/dev/sda1将无法挂载，创建和拷贝操作无法执行
测试硬盘写速度
dd if=/dev/zero of=/root/1Gb.file bs=1024 count=1000000
测试硬盘读速度
dd if=/root/1Gb.file bs=64k | dd of=/dev/null

5.RAID

5.1.RAID的优势和实现

提高IO能力
磁盘并行读写
提高耐用性
磁盘冗余来实现
级别：多块磁盘组织在一起的工作方式有所不同
RAID实现的方式
外接式磁盘阵列：通过扩展卡提供适配能力
内接式RAID：主板集成RAID控制器，安装OS前在BIOS里配置
软件RAID：通过OS实现

5.2.RAID的级别

RAID-0：
读、写性能提升
可用空间：N*min(S1,S2,...)
无容错能力
最少磁盘数：2, 2+
结构如图：
磁盘管理和文件系统

RAID-1：
读性能提升、写性能略有下降
可用空间：1min(S1,S2,...)
有冗余能力
最少磁盘数：2, 2N
结构如图：

RAID-5：
读、写性能提升
可用空间：(N-1)min(S1,S2,...)
有容错能力：允许最多1块磁盘损坏
最少磁盘数：3, 3+
结构如图：
磁盘管理和文件系统

RAID-6：
读、写性能提升
可用空间：(N-2)*min(S1,S2,...)
有容错能力：允许最多2块磁盘损坏
最少磁盘数：4, 4+
结构如图：
磁盘管理和文件系统

RAID-10：
读、写性能提升
可用空间：N*min(S1,S2,...)/2
有容错能力：每组镜像最多只能坏一块
最少磁盘数：4, 4+
结构如图：
磁盘管理和文件系统
RAID-01
多块磁盘先实现RAID0,再组合成RAID1
结构如图：

为什么RAID10比RAID 01好且靠谱：
　　RAID0+1是先做两个RAID0，然后再做RAID1，因此RAID0+1允许坏多个盘，但只能在坏在同一个RAID0中，不允许两个RAID0都有坏盘。
　　RAID1+0是先做RAID1，然后再做RAID0，因此RAID1+0允许坏多个盘，只要不是一对磁盘坏就可以啦。
　　因此说RAID1+0比RAID0+1安全得多，因为在同一对磁盘中，两块磁盘都坏掉的概率很低。
　　RAID 0和RAID 1分别用于增强存储性能（RAID 0 条带）和数据安全性（RAID 1 镜像），而RAID 0+1和RAID 10兼顾了RAID 0和RAID 1的优点，它在提供RAID 1一样的数据安全保证的同时，也提供了与RAID 0近似的存储性能。虽然RAID 0+1和RAID 10基本原理相近，都是RAID0和RAID1的结合，不过还是有些区别。在MySQL数据库中，通常我们选用RAID 10。