Linux基础知识

最新推荐文章于 2023-11-16 17:56:14 发布
最新推荐文章于 2023-11-16 17:56:14 发布
阅读量555 收藏 1
点赞数
分类专栏： 理论基础 文章标签： linux 服务器 进程管理 内存管理 文件系统
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46684578/article/details/125649614
版权

Linux基础

linux 的设计哲学

  • 一切皆文件：目录、字符、套接字等都看作文件
  • 配置管理文本化：所有配置都保存在一个文件中，修改配置只需要修改对应的文件

linux 的构成：内核、外壳Shell、实用工具

linux 内核具备的功能：

  • 进程调度
  • 内存管理
  • 虚拟文件系统
  • 网络接口
  • 进程间通信

目录结构

在这里插入图片描述

proc 目录：提供 用户与系统内核 交互的通道

重要文件

口令文件 /etc/passwd，存放 用户ID等信息，不存放密码信息

口令影子文件 /etc/shadow，存放用户ID 对应密文 等相关信息

用户组文件 /etc/group

1. 进程管理

查看硬件信息

cat /proc/cpuinfo
  • processor 当前 CPU 号
  • model name 型号
  • cpu MHz 主频

查看CPU利用率

mpstat -P ALL l
top -d l			CPU 使用率高的进程排行
ps aux				查看所有进程及状态

1.1 进程

资源分配的最小单位，而线程是 CPU 调度的最小单位

查看进程id getpid()

进程优先级

静态优先级：不会随着时间而改变，内核不会修改它，只能通过系统调用 nice 去修改

动态优先级：运行过程中动态改变程序优先级的值，保证调度的公平性，低优先级的进程在长时间得不到运行状况下会暂时调高其动态优先级。

在这里插入图片描述

守护进程

在终端中运行的程序都依赖于该终端，如果终端关闭，则该程序结束

daemon() 函数可实现该功能

1.2 调度策略

linux进程调度 基于分时技术的抢占式调度

一般情况下，用 SCHED_NORMAL 调度策略

在这里插入图片描述

  • 实时进程优先级高于普通进程
  • 普通进程保证公平占用CPU时间片
  • 调度器以进程优先级为调度依据，总是选择就绪队列中优先级最高的进程作为候选进程

1.3 线程

CPU 调度的最小单位

线程有线程ID ：pthread_self()

线程库：LinuxThreads 与 NPTL

注意线程栈的大小，默认是 4K

2. 内存管理

查看内存硬件信息

cat /proc/meminfo | more

2.1 free命令

查看内存使用情况
在这里插入图片描述

2.2 pmap命令

作用：比较细致的看进程的内存分布情况

pmap -x 1			#1表示进程号

2.3 Valgrind

内存泄露检测工具

3.4 OOM Killer 机制

Out-Of-Memory killer

  • 在系统可用内存较少的情况下，内核为保证系统还能够继续运行下去，会选择杀掉一些进程释放掉一些内存

触发流程

  • 进程 A 想要分配物理内存（通常是当进程真正去读写一块内核已经“分配”给它的内存） -> 触发缺页异常 -> 内核去分配物理内存 -> 物理内存不够了，触发 OOM

2.5 vmstat 命令

vmstat命令是最常见的Linux/Unix监控工具，可以展现给定时间间隔的服务器的状态值,包括服务器的CPU使用率，内存使用，虚拟内存交换情况, IO 读写情况

vmstat 2 1 	     #2表示每2s采集一次服务器状态，1表示只采集1次

2.6 确认 linux 系统内存不足

通过 free、vmstat 等命令

3. 文件系统

通过文件的形式，将数据以文件的形式进行展示

3.1 lsblk 查看硬盘信息

查看硬盘信息
在这里插入图片描述

3.2 smartctl 检测硬盘信息

Smartmontools是一种硬盘检测工具，通过控制和管理硬盘的SMART(Self Monitoring Analysis and Reporting Technology)，自动检测分析及报告技术)技术来实现的，SMART技术可以对硬盘的磁头单元、盘片电机驱动系统、硬盘内部电路以及盘片表面介质材料等进行监测。

在这里插入图片描述

3.3 存储性能指标

  • IOPS：每秒输入输出量，单位时间内系统能处理的 I/O 请求数量
  • 时延：存储过程中花费的时间
  • 吞吐：单位时间内通过某个网络或接口的数据量

3.4 iosata 统计硬盘IO情况

统计硬盘的 IO 情况

iostat -d -x 1

在这里插入图片描述

  • rrqm/s : 每秒合并读操作的次数
  • wrqm/s: 每秒合并写操作的次数
  • r/s ：每秒读操作的次数
  • w/s : 每秒写操作的次数
  • rMB/s :每秒读取的MB字节数
  • wMB/s: 每秒写入的MB字节数
  • avgrq-sz：每个IO的平均扇区数，即所有请求的平均大小，以扇区（512字节）为单位
  • avgqu-sz：平均未完成的IO请求数量，即平均每一扇的请求队列长度
  • await：平均每个IO所需要的时间，包括在队列等待的时间，也包括磁盘控制器处理本次请求的有效时间。
    • r_wait：每个读操作平均所需要的时间，不仅包括硬盘设备读操作的时间，也包括在内核队列中的时间。
    • w_wait: 每个写操平均所需要的时间，不仅包括硬盘设备写操作的时间，也包括在队列中等待的时间。
  • svctm： 表面看是每个IO请求的服务时间，不包括等待时间，但是实际上，这个指标已经废弃。实际上，iostat工具没有任何一输出项表示的是硬盘设备平均每次IO的时间。
  • %util： 工作时间或者繁忙时间占总时间的百分比

3.5 IO 慢定位手段

  1. 先看util,100%说明硬盘可能存在瓶颈，其值过低，说明压力不够，瓶颈可能不在IO
  2. await 如果超过10ms，则业务会感知到IO慢，时延过低则瓶颈可能不在IO
  3. svctm如果大于10ms，则可能硬盘寿命或raid卡故障
  4. avgqu如果大于60，则说明业务压力过大

3.6 进程 IO 统计

pidstat -d 1		# 1s统计1次
pidstat -d

在这里插入图片描述

3.7 使用一块新的硬盘

分区 - LV（Logical Volume）- 格式化文件系统 - 挂载文件系统 - 呈现可访问的文件

3.7.1 创建分区

分区命令

  • fdisk：512字节对齐，最大支持 2T，使用 MBR 的方式
  • parted：GPT的方式，最大支持 18EB
LVM（Logical Volume Manager）

LVM（逻辑卷管理）是 Linux 环境下对 磁盘分区 进行管理的一种机制。能够解决 文件不能跨分区存储的问题。

LVM 逻辑卷管理器技术由物理卷、卷组和逻辑卷组成

易于管理，方便扩展，管理多设备

在这里插入图片描述

PV：Physical volume

VG：Volume group

LV：Logical volume

pvcreate

创建 pv（物理卷），是管理磁盘的第一个环节

pvdisplay命令

用于显示物理卷的属性。显示的物理卷信息包括：物理卷名称、所属的卷组、物理卷大小、PE大小、总PE数、可用PE数、已分配的 PE数 和 UUID

vgcreate

创建 vg（卷组）

vgdisplay命令 查看创建的 vg

lvcreate

创建 LV（逻辑卷）

lvs命令查看创建的 LV

3.7.2 文件系统格式化

mksf
在这里插入图片描述

3.7.3 文件系统 mount挂载

mount命令挂载

挂载是文件存储位置 的意思吗

3.8 查看文件占用情况

df -h			# 查看文件占用大小，挂载情况

du -d 1 -h		# 查看日志分区，-d表示目录深度，1表示只统计1级目录，-h表示用 K,M,G做单位计算文件大小

3.9 硬盘中数据的分布

只要数据区的数据不被破坏，就能够将数据恢复

在这里插入图片描述

疑问

  1. 为什么 Start 是 1049kB

在这里插入图片描述

  1. 问题
    在这里插入图片描述

知识补充

分区对齐：是指将分区的起始位置 对齐到一定的扇区

Buffedon
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
磁盘与文件系统管理
夏颜的博客
04-01 476
文章目录一.磁盘结构1.磁盘结构2.数据结构3.磁盘接口类型二.MBR与磁盘分区1.主引导记录（MBR）2.磁盘分区结构3.文件系统类型4.磁盘分区4.1磁盘分区--fdisk4.2查看磁盘使用情况--df4.3查看磁盘分区状态--lsblk三.创建文件系统--mkfs四.挂载/卸载--mount/umount 一.磁盘结构 1.磁盘结构 1.盘片：硬盘有多个盘片，每盘片2面 2.磁头：每面一个磁头 2.数据结构 1.扇区：盘片被分为多个扇形区域，每个扇区存放512字节的数据，硬盘的最小存储单位 2.磁道
计算机硬盘的扇区大小,了解硬盘扇区大小(Understanding Hard Disk Sector Size)
weixin_28931737的博客
07-16 3721
了解硬盘扇区大小(Understanding Hard Disk Sector Size)我目前正在开发一个与原始磁盘操作交互的内核模式驱动程序。我希望更多地了解行业规模的概念。 在制造HDD时，每个物理驱动器的扇区大小是否为恒定值？或者它是由在磁盘上格式化的文件系统定义的？ 如果是这样，他们可以是2扇区大小？ 一个用于物理磁盘，一个用于文件系统？我知道例如NTFS在其BIOS参数块中有一个名为“...
Linux磁盘分区快速上手（讲解详细）
最新发布
m0_52985087的博客
11-16 6829
在Linux中，磁盘是通过分区来使用的。分区是将一个硬盘划分成几个逻辑部分来使用，在每个分区中可以存储不同的文件系统。因此，在挂载磁盘之前，我们需要先对磁盘进行分区。磁盘分区的过程可以通过命令行工具或图形界面工具来完成。常用的磁盘分区工具有：cfdisk：命令行工具，适用于创建主分区和扩展分区，支持MBR和GPT分区表。fdisk：命令行工具，适用于创建主分区和扩展分区，支持MBR分区表。gdisk：命令行工具，适用于创建主分区、扩展分区和逻辑分区，支持GPT分区表。
Linux：MBR 扇区故障处理 （备份|恢复）
鲍海超
05-31 1345
大概思路：我们准备一个硬盘，并分出一个分区用于单独存放MBR备份文件 或者 和别的文件放在一起也可以（前提是不怕乱）然后将分区挂载然后进行MBR备份 把备份文件放到分区里然后对MBR进行破坏（仅供实验参考，不可乱破坏）然后 光盘 启动 （虚拟机）| u盘（真机） 进入到安装引导界面再使用系统修复中的bash 去挂载刚刚带有MBR备份的分区将分区中的MBR备份文件再次恢复到MBR。
硬盘/磁盘/磁片/磁面结构, 离圆心远的扇区和离圆心近的扇区为什么大小都是512B呢? Zone
08-30 645
一个磁盘多个磁片, 一个磁片分两个盘面, 一个盘面上一个磁头, 一个盘面上有很多磁道, 磁道的一段是扇区(sector, 感觉叫弧线段更合理, 下面我们就叫弧线段吧), 所以一个扇区只有一条磁道通过哦; 早期每条磁道划等量的弧线段(sector), 所以看到的是扇形; 此处我一直很困惑: 磁面离圆心远的弧线段和离圆心近的弧线段为什么大小都是512B呢? 原来离圆心近的弧线段要比离圆心远的弧线段密度大(点多); 这就造成外围磁道空间的浪费; 如何节约增大存储空间呢? 这就引入了Zone(区).
linux基础知识
11-14
有关linux资料 常用的命令 教学基础操作 入门详解 以及安装教程
LINUX基础知识.ppt
11-13
LINUX基础知识 本资源是关于LINUX基础知识的课程大纲，涵盖了操作系统的概念、LINUX的安装配置、基本指令、目录结构等内容。课程目标是让学生了解操作系统的概念、LINUX的安装配置、基本环境、常用的LINUX指令及...
Linux基础知识文档.pdf
06-24
Linux基础知识文档.pdfLinux基础知识文档.pdfLinux基础知识文档.pdfLinux基础知识文档.pdfLinux基础知识文档.pdfLinux基础知识文档.pdf
linux基础知识培训.ppt
11-16
Linux 基础知识培训 Linux 是一种自由和开放源代码的操作系统，由 Linus...Linux 基础知识培训是了解 Linux 操作系统的基础知识的入口，了解 Linux 的基础知识对于使用 Linux 操作系统和进行 Linux 系统管理非常重要。
LINUX基础知识笔记分享学习
10-21
LINUX 基础知识笔记分享学习 LINUX 基础知识笔记分享学习是指在 openEuler 平台上学习和应用 LINUX 基础知识的笔记分享和学习。openEuler 是一个开源、免费的 LINUX 发行平台，支持 x86、ARM、RISC-V 等多种处理器...
Linux：监控磁盘I/O的命令。
孤芳不自赏
03-01 3475
iostat 该命令用于监控CPU占用率、平均负载值及I/O读写速度等。 该命令输出的每个字段都非常有用：r/s和w/s指的是IOPS；rkB/s和wkB/s指的是每秒的数据存取速度；await指的是平均等待时间，一般都在10ms左右。 另外，iotop、ioprofiler、blktrace可以监控更多底层的I/O活动信息，vmstat、mpstat也有一些I/O相关的信息输出。 使用方...
linux下扇区、块、页的区别+inode与高速缓冲区在linux文件系统的作用
weixin_46199479的博客
03-19 3226
学习linux文件系统时整理的一些笔记。
Linux存储管理：基本分区
qq_52302132的博客
05-12 644
文章目录磁盘简介（了解即可）名词类型尺寸接口转速厂商术语命名分区方式管理磁盘添加磁盘管理流程1.查看磁盘信息2.创建分区3.创建文件系统4.挂载文件5.查看磁盘信息 磁盘简介（了解即可） 名词 磁盘（disk）是指利用磁记录技术存储数据的存储器。磁盘是计算机主要的存储介质，可以存储大量的二进制数据，并且断电后也能保持数据不丢失。 磁盘／硬盘／disk是一个东西，不同于内存的是磁盘容量比较大 类型 工作上原理区分： 机械：机械硬盘（HDD）即是传统普通硬盘，主要由：盘片，磁头，盘片转轴及控制电机，磁头控制
深入理解iostat
热门推荐
渔夫数据库笔记
07-27 2万+
iostat算是比较重要的查看块设备运行状态的工具，相信大多数使用Linux的同学都用过这个工具，或者听说过这个工具。但是对于这个工具，引起的误解也是最多的，大多数人对这个工具处于朦朦胧胧的状态。现在我们由浅到深地介绍这个工具，它输出的含义什么，介绍它的能力边界，介绍关于这个工具的常见误解。
Linux命令修复方法,Linux系统MBR的修复方法
weixin_34238178的博客
04-28 619
MBRboot loader介绍MBR是硬盘中第一个扇区的前512个字节，称为main boot record,512字节中的前446个字节为boot loader所在部分，boot loader为引导系统程序所在的位置。在Linux系统中，boot loader使用的引导程序为grub。boot loader修复方法1、使用grub命令，此命令只修复boot loader说明：服务器上只有一个硬...
Linux磁盘与文件系统管理
qq_47343020的博客
05-23 212
Linux磁盘与文件系统管理 磁盘结构基础 （1） 数据结构： 扇区:盘片被分为多个扇形区域，每个扇区存放512字节的数据，硬盘的最小存储单位 **磁道:**同一盘片不同半径的同心圆， 是由磁头在盘片表面划出的圆形轨迹，方便数据存储 **柱面:**不同盘片相同半径构成的圆柱面，由同一半径圆的多个磁道组成 （2）物理结构 盘片 ：硬盘有多个盘片，每个盘片有2面 磁头：每面一个磁头 （3）存储容量： 硬盘存储容量=磁头数x磁道(柱面)数×每道扇区数×每扇区字节数(512字节) 可以用柱面/磁头扇区来

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Buffedon

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值