NVME CLI -- nvme 命令查看NVME设备内部状态

已于 2022-02-22 18:08:00 修改
阅读量4.5w 收藏 180
点赞数 21
分类专栏： 新硬件 文章标签： nvme
于 2020-12-20 15:07:02 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Z_Stand/article/details/111415236
版权

文章目录

近期在做一些rocksdb on 新硬件的性能测试（flash ssd, nvme ssd , nvme optane ssd, optane persistent memory），由于底层一些设备的实现对我来说还是知识盲区，一些设备IO表现出来的行为完全是黑盒，让人琢磨不透。
因此利用周末时间对基础的AHCI + SATA 调度的传统ssd 和 基于 NVME 协议调度的ssd 做了一个入门了解。
细粒度的参考可以直接读官方文档：NVME-doc

NVME 和 AHCI 性能比较

NAND 闪存是传统ssd的存储介质。早期的ssd通过上层的AHCI（advanced host controller interface） + SATA协议进行操作系统的块设备驱动层到底层物理设备的IO调度，但是这样的组合AHCI + SATA 是为了传统的HDD机械硬盘设计的，在如今ssd内部核心技术的快速发展中已经无法发挥出底层SSD的低延时和高性能的优势。为了发挥SSD高性能，固件厂商为SSD量身打造了一个协议标准NVME（ Non-Volatile Memeory Express），且这个标准不仅可以应用在NAND的存储介质上，也能够应用在高性能和低延时的3D XPoint 新型介质上。

整体的NVME 协议架构如下，总共分为四层，到最底层就是 nvme的subsystem：
在这里插入图片描述
nvme的subsystem
在这里插入图片描述

NVME和AHCI 相比的优势主要是以下三个方面：

  1. 低延时（Latency）
    传统的HDD+sas/sata 随机读延时大概在ms量级
    NAND ssd + sas/sata 随机读延时在110us 左右
    基于NVME的NAND ssd 随机读延时在85us 左右，相比于sata的nand ssd 延时降低了20 us
    当然3D XPoint + nvme 这样的新型存储介质 延时只有10us左右（intel Optane p4800），这样的硬件红利带来的效果还是很给力的。

    以上的延时都会体现在上层的应用之中，尤其是新型存储介质搭配nvme协议 体现出的低延时 对上层应用的正向反馈还是十分给力的。而且intel 近期仍然会推出更为给力的p5800（iops 和带宽 相比于p4800 提升一倍以上，latency会降低40%-50%）。

    实现上来看，对硬盘存储延时有影响的如下几种：

    • 存储介质层面，闪存比传统的机械硬盘快很多。（NAND是通过 基于 MOS场效应的浮栅晶体管 实现的底层0，1bit位的互换， 而 机械硬盘则是电信号 磁信号之间的转化，还夹杂着主流程上大量的机械运动。一个是纯化学反应，一个是机械运动为主体，两者性能当然千差万别）

    • 控制器方面，sata ssd需要通过南侨控制器中转，再连接到CPU；而NVME的 pcie ssd主控可以和CPU直连。所以时延方面，PCIE ssd 更低。

    • 软件接口方面：NVME 缩短了CPU 到ssd的指令路径，比如NVME减少了对寄存器的访问次数，使用了MSI-X中断管理；并行&多线程优化 – NVME减少了各个CPU核之间的锁同步操作。

  2. 高性能
    理论上，IOPS= 队列深度/IO延迟，所有IOPS的性能和队列深度有很大的关系（但并不是正比，实际应用中，随着队列深度的增加，IO延时也会增加）。
    SATA ssd 市面上能做到最好的IO深度是32，但目前企业级的PCIE ssd 队列深度能够达到128 甚至256才能发挥出其底层ssd的最高性能。 而在NVME标准下，最大的队列深深度能够达到64K。

  3. 低功耗
    NVME加入了自动功耗状态切换 和 动态能耗管理功能。

NVME-CLI nvme工具使用

所以总上来看NVME 是现在新型存储的标准，所以我们做存储的应该上通应用，下晓FM，且与时俱进。
而且NVME 社区也维护了一套完整的工具来协助我们加深对NVME的理解NVME-CLI

关于NVME以及 NAND闪存的原理其实理解的非常浅薄，后续会持续补充。接下来回到本节的主题，将NVME的基本工具使用做一个整体的记录。

1. 安装

  • on ubuntu :
    https://github.com/linux-nvme/nvme-cli
  • on Centos/RHEL 7.x or 8x
    https://github.com/linux-nvme/nvme-cli

2. 命令综述

注意，以下命令需要在root用户下运行，并不是所有的自命令，只是一些比较常用的命令。
建议在测试硬盘上使用，且明确命令的含义，以下的部分命令会删除数据。

CommandDescription
nvme list查看所有连接到当前系统的nvme设备：名称，序列号，大小，LBA 和 serial
nvme id-ctrl展示nvme 控制器和它所支持的一些特性
nvme id-ns展示nvme 的命名空间，优化特性和支持特性
nvme format安全擦除SSD上的数据，格式化LBA大小或保护信息以实现端到端数据保护
nvme sanitize安全得擦除SSD上的所有数据
nvme smart-log查看NVME的smart log信息：page的健康状态，温度，稳定性情况等
nvme fw-log查看NVME的固件日志，会打印每个entry的健康情况
nvme error-logNVME的异常日志
nvme reset重置NVME的控制器
nvme help查看帮助信息
nvme delete-ns指定设备删除一个命名空间
nvme create-ns指定设备创建命名空间。比如可以为一个设备创建一个较小大小的命名空间，从而提升SSD的稳定性，性能和延时？（具体原理还不太清楚）
nvme fw-download为一个设备下载一个新的固件系统
nvme fw-commit让固件立即运行

如下使用

nvme help

能够看到大量的命令集
在这里插入图片描述

3. 基本命令演示

一些命令需要指定设备运行，这里建议指定字符设备，即/dev/nvme0 这样的，因为字符设备文件获取到的数据是直接从底层存储中取出来的；如果指定/dev/nvme0n1这样的块设备，数据读取会走操作系统buffer cache，可能有一些数据更新不及时。

  1. nvme id-ctrl /dev/nvme0 查看nvme controller 支持的一些特性

    NVME Identify Controller:
vid       : 0x1c5f # PCIe vendor id
ssvid     : 0x1c5f
sn        : FL172100442 # serial number
mn        : Z45C7032C22
fr        : 2090500 # firm version 固件版本号
rab       : 1
ieee      : 00e0cf
cmic      : 0
mdts      : 5
cntlid    : 0
ver       : 0
rtd3r     : 0
rtd3e     : 0
oaes      : 0
...
...

  2. nvme list 查看当前环境的 nvme设备
    在这里插入图片描述

  3. nvme id-ns /dev/nvme0 查看nvme的namespace，这个能够非常方便得看到nvme内部的LBA（逻辑地址和物理地址的映射表）使用情况等非常有用的信息。
    如果出现如下错误:

    # nvme id-ns /dev/nvme0
Error: requesting namespace-id from non-block device
NVMe Status:INVALID_NS: The namespace or the format of that namespace is invalid(b) NSID:0

    这里就需要指定namespace的id了，通过
    nvme list-ns /dev/nvme0 查看当前设备的name space

    # nvme list-ns /dev/nvme0
[   0]:0x1

    然后再执行nvme id-ns --namespace-id=0x1 /dev/nvme0 即可看到如下信息
    在这里插入图片描述
    使用-H 命令能够提升输出结果的可读性
    在这里插入图片描述

  4. nvme smart-log /dev/nvme0 查看设备smart log信息
    在这里插入图片描述

  5. nvme error-log /dev/nvme0 查看设备error 信息
    在这里插入图片描述

4. NVME 固件设备升级

ssd 供应商会跟随ssd的研发周期性更新固件，跟进固件的更新能够保证一些关于bug-fix, 稳定性提升的补丁包及时得到更新。当然，固件升级的频率也不会很高，一般一年不会超过5次。升级前可以和供应商核对固件升级的版本信息。

确认固件版本：

nvme id-ctrl /dev/nvme0 |grep "fr "

下载固件并应用起来

nvme fw-download /dev/nvme0 -
nvme fw-commit /dev/nvme0 -a 0

这里注意下commit 过程中-a指定的action 模式有种，表示不同的含义

  • 0 : 下载的固件镜像替换原有的固件镜像，但并不会激活。即不会让这个镜像运行起来
  • 1：下载的固件镜像替换原有的固件镜像，会在NVME reset之后运行起来。（发生了热插拔，断电，上电也会运行）
  • 2：由固件插槽指定的镜像会在下次重置之后激活
  • 3: 获取到的固件镜像会被立即激活而不需要重置

下载好的固件，加入需要重置的话可以执行如下命令:

nvme reset /dev/nvme0

本身并不是NVME的研发人员，使用的话其实只需要获取一些基本的设备状态信息就可以了，后续工作中如果需要知道更加详细的NVME 设备内部状态信息，会再做一些更加细致的整理。

不过关于基础的NAND，3D-XPoint， NVME 等实现还是需要持续探索，未来的存储系统一定会结合新硬件来做，这样才会有更加极致的性能。

nvme-cli 工具介绍
weixin_49423593的博客
02-26 2934
nvme-cli 是一个用于与 NVMe（Non-Volatile Memory Express）设备交互的命令行工具。NVMe是一种设计用于固态驱动器（SSD）的高性能存储和访问协议。nvme-cli 允许用户执行各种与 NVMe 设备相关的操作，例如查看设备信息、执行固件更新、进行性能测试等。请注意，具体的命令和选项可能会根据 nvme-cli 的版本和配置而有所不同。要获取准确的命令和选项信息，请查阅相关文档或使用工具内置的帮助功能（例如 nvme help）。
NVMe之命令
u010616442的博客
04-26 1万+
NVMe有两种命令：admin命令和I/O命令。admin命令时用以Host管理和控制SSD的，而I/O命令用于Host与SSD之间的数据传输。         NVMe Driver支持以下admin处理和命令：DeleteI/O Submission Queue，CreateI/O Submission Queue，GetLog Page，DeleteI/O Completion Que
NVMe-CLI 使用教程
gitblog_00453的博客
08-09 1506
NVMe-CLI 使用教程 项目地址:https://gitcode.com/gh_mirrors/nv/nvme-cli 项目介绍 NVMe-CLI 是一个用于与 NVMe（Non-Volatile Memory Express）设备交互的命令行工具。NVMe 是一种设计用于固态驱动器（SSD）的高性能存储和访问协议。NVMe-CLI 允许用户执行各种与 NVMe 设备相关的操作，例如查看设备信...
NVMe（Non-Volatile Memory Express）详解
最新发布
SDJ_success的博客
03-22 1600
NVMe（非易失性内存主机控制器接口规范）是一种基于PCIe总线的高性能存储协议，专为固态硬盘（SSD）设计，旨在替代传统的AHCI协议（如SATA）。低延迟：命令队列深度提升至64K（AHCI仅32），减少I/O等待时间（典型延迟<100μs）。高吞吐量：支持PCIe 4.0 x4带宽（8GB/s），PCIe 5.0 x4可达16GB/s。多队列并行：支持多核CPU并行访问，优化多线程性能。扩展性：支持NVMe over Fabrics（NVMe-oF），实现远程存储访问。1. 接口类型接口形态。
nvme_cli工具是用于对nvme盘进行测试的一款通用工具
03-21
提供了对nvme盘进行读写，查看control、namespace信息等功能。
nvme-cli常用指令
热门推荐
Rudy的博客
10-17 7万+
NVMe management command line interface 1.下载地址 https://codeload.github.com/linux-nvme/nvme-cli/zip/master 2.安装 unzip nvme-cli-master.zip cd nvme-cli-master.zip make &amp;amp;amp;amp;amp;amp;amp;amp;amp;&amp;amp;amp;amp;amp;amp;amp;amp;amp; ma
nvme-cli：NVMe管理命令行界面
02-10
nvme-cli 用于Linux的NVM-Express用户空间工具。 要安装，请运行： $ make # make install 如果不确定如何使用，请查找具有以下内容的顶级文档： $ man nvme 或找到简短摘要： $ nvme help 发行支持 高山Linux nvme-cli已在Alpine Linux 3.3上进行了测试。 使用以下方法安装： # apk update && apk add nvme-cli nvme-cli-doc 如果您只是使用所要使用的设备，它将完美无缺。 # nvme smart-log /dev/nvme0 Smart Log for NVME device:/dev/nvme0 namespace-id:ffffffff critical_warning : 0 temperature
NVMe 命令
HHFQ的博客
11-18 4909
了解 NVMe 命令。 这些命令用于 NVMe 驱动器以及使用 NVMe PCIe 适配器的功能代码 EKAE。 如果未安装 nvme 命令，请从 https://github.com/linux-nvme/nvme-cli 下载该实用程序。 按照该站点上的安装说明进行操作。 要确定要更换哪个驱动器，请使用以下命令： nvme list 如果要搜索故障驱动器，可以使用以下命令检查每个驱动器： nvme smart-log <device> 要打开定位 LED，请使用以下命令： dd if=/
nvme-cli-1.8.1-3.el7.x86-64.rpm
05-20
nvme_cli工具，rpm安装
nvme-cli-1.6-2.oe1.aarch64.rpm
08-13
NVMECLI工具RPM
nvme-cli-master.zip
08-28
`nvme-cli`是针对NVME设备的一个命令行工具，用于管理和监控NVME设备。它能够帮助用户获取NVME设备的各种信息，包括但不限于： 1. **设备信息**：通过`nvme list`命令，可以查看系统中的所有NVME设备及其详细信息，...
nvme-cli源码
10-10
# nvme-cli NVM-Express user space tooling for Linux. To install, run: $ make # make install If not sure how to use, find the top-level documentation with: $ man nvme Or find a short summary with: $ nvme help ## Distro Support ### Alpine Linux nvme-cli is tested on Alpine Lin
nvme-cli-1.6-1.el7.x86_64.rpm
11-30
离线安装包，亲测可用
nvme-cli使用
黑客三遍猪
04-24 2万+
参考 Intel ISDCT, SanDisk SCLI和NVMe-CLI三款SSD工具基本操作简介 nvme-cli常用指令 nvme-cli官网
Nvme-cli常用指令
hongfuhaocomon的博客
07-10 1398
【代码】Nvme-cli常用指令。
nvme linux读写测试工具,Nvme-Cli使用心得（二） Read/Write测试经验
weixin_30915399的博客
05-07 3685
1.Write首先看Write命令的官方说明：nvme-write [--start-block=| -s ][--block-count=| -c ][--data-size=| -z ][--metadata-size=| -y ][--ref-tag=| -r ][--data=| -d ][--metadata=| -M ][--prinfo=| -p ][--app-tag-mask=|...
2.11 企业级SSD之nvme-cli使用
shenfan321的博客
04-01 2733
其实nvme-cli的族谱里除了reset,rescan等几个命令，其他都是admin-passthru，IO-passthru衍生出来的。比如nvme-admin-passthru衍生出get-log等一堆admin命令，get-log又衍生出很多具体的log命令。nvme SSD用的最多的是开源工具nvme-cli，大部分代码就是拼命令字段然后通过ioctl发给内核，可以github下载源码看下具体实现。nvme -h 可以获取所支持的命令，nvme smart-log -h能更具体获得参数介绍。
nvme命令详解
weixin_45720992的博客
01-04 4049
请确保在执行这些命令时，/dev/nvme0 和 /dev/nvme0n1 需要替换为实际的设备路径，而路径到固件的 /path/to/firmware.bin 也需替换为固件文件的实际路径。错误的命令执行可能会导致数据丢失或服务中断。在使用这些命令之前，请确保您了解每个命令的具体作用，并且在生产环境中慎重使用，特别是涉及到安全和固件操作的命令，因为它们可能会对设备的正常运行造成影响。功能：此命令用于获取指定的 NVMe 设备的日志页面，可以返回各种类型的日志，例如SMART/健康信息、错误信息等。
查看 NVMe 硬盘的挂载情况和使用状态
Never Give Up
10-04 2070
lsblk是最直观的工具，可以清晰地显示 NVMe 硬盘分区和挂载点。df -h可以查看挂载点的磁盘使用情况。fdisk显示分区表和类型信息，但不会显示挂载点。nvme list适用于查看 NVMe 设备的详细信息，包括型号和序列号。通过这些命令，你可以清楚地查看 NVMe 硬盘的挂载状态和存储使用情况。如果你有进一步问题，可以继续提问！
SEOM和lgH EtherCAT Master的异同
01-11
### SEOM 和 lgH EtherCAT Master 的差异与相似之处 #### 差异 1. **硬件实现** SEOM（Simple Ethernet Over Modbus）通常依赖于标准的工业以太网设备来传输数据，而lgH EtherCAT Master则专为EtherCAT协议设计，提供更高效的实时通信能力[^1]。 2. **配置复杂度** 使用SEOM时，由于其基于Modbus/TCP协议栈，可能需要更多的网络配置工作；相比之下，lgH EtherCAT Master提供了更为简便的一站式解决方案，在安装和调试方面更加友好。 3. **性能表现** lgH EtherCAT Master能够支持更高的刷新率以及更低延迟的数据交换过程，这对于时间敏感型应用至关重要。相反，尽管SEOM也能满足大多数自动化需求，但在极端条件下可能会表现出一定的局限性。 4. **兼容性和扩展性** 虽然两者都可以与其他品牌的产品互操作，但是lgH EtherCAT Master拥有更好的生态系统支持，可以更容易地接入各种类型的现场总线节点并实现分布式控制架构。与此同时，SEOM更多地局限于特定厂商提供的组件之间协作。 #### 相似之处 1. **通信基础** 无论是SEOM还是lgH EtherCAT Master都建立在IEEE802.3标准之上，这意味着它们共享相同的物理层特性，并且可以在同一局域网上共存而不互相干扰。 2. **应用场景** 这两种技术都被广泛应用于现代制造业中的运动控制系统之中，帮助工程师们构建灵活可靠的生产线自动化方案。此外，二者均适用于远程监控、维护和服务等领域。 3. **编程接口** 对开发者而言，这两种主站模块一般都会配备相应的API库或工具包，以便简化应用程序开发流程。通过调用预定义的功能函数即可完成诸如参数设置、状态查询等常见任务。 ```python # Python伪代码示例：连接到不同的Master设备 def connect_to_master(master_type="seom"): if master_type == "ethercat": # 建立与lgH EtherCAT Master的连接逻辑 pass elif master_type == "seom": # 建立与SEOM的连接逻辑 pass ```
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值