SPDK中常用的性能测试工具

于 2023-03-09 14:13:01 发布
阅读量144 收藏
点赞数
分类专栏： SPDK 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/Dayu_log/article/details/129421859
版权
Dayu_log
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【SPDK】SPDK + fio编译、测试（包成功版）
Badme
03-05 168
【SPDK】SPDK + fio编译、测试（包成功版）
SPDK 的测试 fio
lingshengxiyou的博客
03-29 346
上述配置文件将在时间上限为 60 秒的情况下，使用 4KB 块大小和 128 的 I/O 深度，在 /dev/nvme0n1 上进行随机写入测试，并且使用 SPDK 引擎执行测试。总的来说，使用 fio 测试 SPDK 的性能是一种有效的方式。具体的测试参数可以根据实际情况进行调整。SPDK 是一款高性能的存储开发套件，为了测试 SPDK 的性能，可以使用 fio 工具进行测试。测试完成后，fio 将显示测试结果的各种统计信息。其中，config_file_name.fio 是你创建的配置文件的名称。
SPDK开发手册中文版.docx
06-08
SPDK（存储性能开发套件）官方文档中文版。 第一章 简介 1 1.1.什么是SPDK？ 1 1.2.入门 1 1.3. Vagrant开发环境 3 1.4.更新日志（略） 6 第二章 概念 6 2.1. 用户空间驱动程序** 6 2.2. 来自用户空间的DMA** 7 2.3. 消息传递和并发** 9 2.4. NAND Flash SSD内部 13 2.5. 将I / O提交到NVMe设备** 15 2.5.1 NVMe规范 15 2.5.2 SPDK NVMe驱动程序I / O路径 15 2.6. 使用Vhost-user进行虚拟化I / O. 16 2.6.1 介绍 16 2.6.2 QEMU 17 2.6.3 设备初始化 18 2.6.4 I / O路径 19 2.6.5 SPDK优化 20 2.7. SPDK目录结构概述 20 2.8. SPDK移植指南 22 第三章 用户指南 22 3.1. 系统配置用户指南 22 3.1.1 IOMMU配置 22 3.2. SPDK应用程序概述 23 3.2.1 配置SPDK应用程序 23 3.3. iSCSI Target 26 3.3.1. iSCSI Target入门指南 26 3.3.2. 通过配置文件配置iSCSI Target 27 3.3.3. 通过RPC方法配置iSCSI Target 28 3.3.4. 配置iSCSI启动器 29 3.3.5. rpc配置示例*** 30 3.3.6. iSCSI 热插拔 32 3.4. NVMe over Fabrics Target 32 3.5. Vhost Target（略） 37 3.6 块设备用户指南 38 3.6.1 bdev介绍 38 3.6.2 通用RPC命令 38 3.6.3 Ceph RBD 39 3.6.4 压缩虚拟Bdev模块 40 3.6.5 加密虚拟Bdev模块 41 3.6.6 延迟vbdev模块 41 3.6.7 GPT（GUID分区表） 42 3.6.8 iSCSI bdev 43 3.6.9 Linux AIO bdev 43 3.6.10 OCF虚拟bdev 43 3.6.11 Malloc bdev 44 3.6.12 NULL bdev 44 3.6.13 NVMe bdev 44 3.6.14 逻辑卷Lvol 45 3.6.15 RAID 46 3.6.16 Passthru 46 3.6.17 Pmem 46 3.6.18 Virtio Block 47 3.6.19 Virtio SCSI 47 3.7 BlobFS（Blobstore文件系统） 48 3.7.1 RocksDB集成 48 3.7.2 FUSE插件 49 3.8 JSON-RPC方法（略） 49 第四章 程序员指南 49 4.1. Blobstore程序员指南 49 4.1.1 介绍 50 4.1.2 运作理论 50 4.1.3 设计注意事项 52 4.1.4 例子 54 4.1.5配置 54 4.1.6 组件细节 54 4.2. 块设备层编程指南 56 4.3 编写自定义块设备模块 58 4.3.1 介绍 58 4.3.2 创建一个新模块 59 4.3.3创建虚拟Bdev 60 4.4 NVMe over Fabrics目标编程指南 61 4.4.1 介绍 61 4.4.2 原语结构体 61 4.4.3 基础函数 62 4.4.4访问控制 62 4.4.5发现子系统 62 4.4.6 传输 63 4.4.7选择线程模型 63 4.4.8 跨CPU核心扩展 63 4.4.9 零拷贝支持 63 4.4.10 RDMA 63 4.5 Flash传输层 64 4.5.1 术语 64 4.5.2 使用方法 67 4.6 GDB宏用户指南 69 4.6.1 介绍 69 4.6.2 加载gdb宏 71 4.6.3 使用gdb数据目录 72 4.6.4 使用.gdbinit加载宏 72 4.6.5 为什么我们需要显式调用spdk_load_macros 72 4.6.6 以上可用的宏总结 73 4.6.7 添加新宏 73 4.7 SPDK “Reduce”块压缩算法 73 4.7.1 介绍 73 4.7.2 例子 74 4.8 通知库 78 第五章 基本信息 79 5.1 事件框架 79 5.1.1 事件框架设计注意事项 80 5.1.2 SPDK事件框架组件 80 5.1.3 应用框架 80 5.2 逻辑卷 81 5.2.1 术语 81 5.2.2 配置逻辑卷 84 5.3 矢量数据包处理（略） 86 第六章 杂项 86 6.1 介绍 86 6.2 NVMe的P2P API 86 6.3 确定设备支持 87 6.4 P2P问题 87 第七章 驱动程序 88 7.1 NVMe驱动程序*** 88 7.1.1 介绍 88 7.1.2 例子 88 7.1.3 公共接口 89 7.1.4 NVMe驱动程序设计 89 7.1.5 NVMe over Fabrics主机支持 91 7.1.6 NVMe多进程 91 7.1.7 NVMe Hotplug 92 7.2 I/OAT驱动程序 93 7.2.1 公共接口 93 7.2.2 关键功能 93 7.3 Virtio驱动程序 93 7.3.1 介绍 93 7.3.2 2MB大页面 93 第八章 工具 94 8.1 SPDK CLI 94 8.1.1 安装所需的依赖项 94 8.1.2 运行SPDK应用程序实例 94 8.1.3 运行SPDK CLI 94 8.1.4 可选 - 创建Python虚拟环境 94 8.2 nvme-CLI 95 8.2.1 nvme-cli with SPDK入门指南 95 8.2.2 使用场景 95 第九章 性能测试报告（略） 96 第十章NVMe-oF Target跟踪点*** 96 10.1 介绍 96 10.2 启用跟踪点 97 10.3 捕获事件的快照 97 10.4 捕获足够的跟踪事件 98 10.5 添加新的跟踪点 99
spdk:存储性能开发套件
03-26
存储性能开发套件 存储性能开发套件（ ）提供了一组工具和库，用于编写高性能，可扩展的用户模式存储应用程序。 它通过将所有必要的驱动程序移至用户空间并以轮询模式运行，而不是依赖于中断，从而实现了高性能，从而避免了内核上下文切换并消除了中断处理开销。 该开发套件当前包括： 在本自述文件中 文献资料 以及用于将SPDK移植到不同框架和操作系统的。 源代码 git clone https://github.com/spdk/spdk cd spdk git submodule update --init 先决条件 依赖项可以通过scripts/pkgdep.sh自动安装。 scripts/pkgdep.sh脚本将自动安装构建SPDK所需的最低要求。 使用--help查看有关为可选组件安装依赖项的信息 ./scripts/pkgdep.sh 建造 Linux： ./configure mak
SPDK v22.09 完整源码 SSD NVMe/性能测试
04-05
SPDK v22.09 完整源码，包括了所有子模块的代码。下载即可直接编译使用。 SPDK是一款开源软件，通常可用于SSD NVMe协议或者读写性能测试。SSD不限于消费级、企业级或者数据中心级。 如果你对SPDK感兴趣，或者你是存储行业SSD的从业者，可以下载它来对SSD进行测试。SPDK自带一些简单的测试用例，可测试NVMe协议或者读写性能。它也支持用户对它进行二次开发，可基于SPDK设计自己的测试框架，基于SPDK编写测试用例也非常简单。
RocksDB 性能测试（全网搜集）
duxingxia356的专栏
09-27 5197
https://en.wikipedia.org/wiki/MyRocks#Benchmarks percona https://www.percona.com/blog/2018/04/30/a-look-at-myrocks-performance/ http://baijiahao.baidu.com/s?id=1599227245729254474&wfr=spider&am...
rocksdb和spdk
clever_wr的博客
10-19 837
对于SSD使用SPDK作为NVMe driver的好处在于实现了用户态、异步、轮询、无锁等特性。与传统Linux内核中的NVMe driver相比，降低了nvme command的 rocksdb和SPDK相连必须要使用blobfs才可，可以参见https://spdk.io/doc/blobfs.html 首先是下载rocksdb。 git clone -b spdk-v5.14.3 https://github.com/spdk/rocksdb.git 然后进行编译：（SPDK_DIR表示的是
SPDK: 单线程存储性能达到1039万IOPS
weixin_37097605的博客
07-10 1830
作者简介：Ben: Walker Benjamin. Intel 资深软件工程师，SPDK开发主管。Jim:Harris Robert James. Intel 首席...
SPDK初步安装测试
肥叔菌的博客
11-17 5062
一、SPDK简介及基本使用 随着硬盘、闪存技术的高速发展，NVME-ssd已逐渐进入分布式存储的核心领域。伴随着NVME-ssd的出现，涌现出一批新型的存储名词，包括分层存储、分级存储、冷热存储、混合存储等。而这些名词的出现，也意味着ssd在当前大环境下由于其昂贵的价格还无法大量应用。根据预测，ssd价格将在19年末出现大幅下降，藉此，ssd将成为存储领域重要的存储介质。 ssd存储介质正在取代传统数据中心的机械硬盘。ssd无论是从性能、功耗以及密度上都存在巨大的优势，而这些优势将使得ssd成为下一代存储的
nvme介绍及性能测试
01-29
nvme介绍
SPDK官方文档中文版.pdf
09-12
SPDK中文版
详解DPDK和SPDK技术知识点
02-06
DPDK 的组成架构如下图所示，在最底部的...议栈，以及传统的 Linux 网络工具（如 ethtool, ifconfig）。IGB_UIO（igb_uio.ko 和 kni.ko. IGB_UIO）则借助了 UIO 技术，在初始化过程中将网卡硬件寄存器映 射到用户态。
浅谈SPDK（三）SPDK集成Rocksdb
饿狗博客
06-25 1668
官方安装文档：https://spdk.io/doc/blobfs.html 1、首先是安装spdk(github地址: https://github.com/spdk/spdk)： spdk(v21.04.x)，我这里是安装官网最新版本 git clone -b v21.04.x https://github.com/spdk/spdk.git cd spdk 再安装dpdk ( spdk-21.02)和isa(spdk-v2.30.0) git clone -b spdk-21.02 https://
测试spdk下的nvme和rocksdb
饿狗博客
07-08 846
以下均是参考链接 使用db_bench 对rocksdb进行性能压测 SPDK中常用的性能测试工具 火焰图辅助我们去分析性能，生成火焰图的步骤如下： sudo /usr/src/linux-source-4.15.0/tools/perf/perf record -F 99 -p 1165 --call-graph dwarf sudo /usr/src/linux-source-4.15.0/tools/perf/perf report -n -f --stdio sudo /usr/src/linux-
Rocksdb on SPDK相关代码分析
鲸鱼写程序的专栏
07-29 306
lib/rocksdb/env_spdk.cc 用到的库 40 #include "spdk/env.h" 41 #include "spdk/event.h" 42 #include "spdk/blob.h" 43 #include "spdk/blobfs.h" 44 #include "spdk/blob_bdev.h" 45 #include "spdk/log.h" 46 #include "spdk/thread.h" 47 #include "spdk/bdev.h"...
Rocksdb加SPDK改善吞吐能力建设
weixin_37097605的博客
02-24 2193
点击上方蓝字，关注我们吧作者：陈旭 chenxu14@meituan.com01背景说明rocksdb是一个被广泛采用的KV系统，其功能已经逐渐演变成很多上层应用的一个基础组件，像Cep...
在虚拟机上部署SPDK NVME测试案例
weixin_37097605的博客
08-21 2370
作者简介： 万群Intel 存储软件工程师主要从事SPDK软件测试工作_1背景介绍_正如我们之前在微信中所讨论的在物理机器[1]上使用SoftRo...
pynvme 使用的是 SPDK 提供的 NVMe 命令行工具指什么
最新发布
06-04
pynvme 使用的是 SPDK 提供的 NVMe 命令行工具，它是 SPDK 中的一个命令行界面工具，用于与 NVMe 设备进行交互和测试。SPDK 的 NVMe 命令行工具基于 SPDK 提供的 NVMe 用户态驱动程序，可以直接对 NVMe 设备进行操作...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值