文章汇总（包括NVMe SPDK vSAN Ceph xfs等）

最新推荐文章于 2023-12-14 08:00:24 发布
最新推荐文章于 2023-12-14 08:00:24 发布
阅读量355 收藏 5
点赞数 1
文章标签： 运维
原文链接：http://www.cnblogs.com/rodenpark/p/6220570.html
版权
本文深入探讨了NVMe驱动的关键组成部分及其在Linux系统中的实现方式，包括DMA传输、I/O请求处理等内容，并详细介绍了SPDK框架下NVMe协议的具体实现。此外，还讨论了NVMe在虚拟化环境中的性能表现。
摘要由CSDN通过智能技术生成

基础部分

NVMe驱动解析-前言

NVMe驱动解析-注册设备

NVMe驱动解析-关键的BAR空间

NVMe驱动解析-DMA传输（热门）

NVMe驱动解析-响应I/O请求

用一个简单的例子窥探NVMe的PRP规则

SPDK预备知识-DPDK

SPDK的NVMe协议实现-上半部分

SPDK的NVMe协议实现-下半部分

NVMe融合blk-mq（从centos7.2开始）

强势回归，Linux blk用实力证明自己并不弱！（热门）

NVMe over Fabrics

NVMe over Fabrics：概念、应用和实现

NVMe over Fabrics又让RDMA技术火了一把

NVMe总结

你好，SPDK！（热门）

NVMe的守护线程和错误处理机制

对NVMe SSD热插拔时，我需要注意什么？（热门）

G2M Research：NVMe市场即将爆发（热门）

VMware

VMware VSAN6.2 的压缩和除重功能对性能的影响

探索NVMe在ESXi6.0上的性能极限（热门）

KVM与其他

以Tintri为代表的VM-aware Storage

教你看懂虚拟化，细说IO如何在Guest和Host之间自由穿梭

Ceph

关于ceph的osd，从object说起

影响性能的关键部分-ceph的osd journal写（热门）

client如何向ceph osd发起请求

ceph osd dataplane：网络、线程和队列

文件系统（xfs）

文件系统的log什么时候刷下去？

Buffer I/O的数据什么时候刷下去？

 

 

转载于:https://www.cnblogs.com/rodenpark/p/6220570.html

weixin_30745553
关注
用户态NVMe运维利器——SPDK NVMe字符设备
lingshengxiyou的博客
09-06 600
当使用bdev_nvme_cuse_registerRPC命令后，SPDK会通过CUSE在路径/dev/spdk下，为NVMecontroller创建 /dev/spdk/nvmeX, 并为其下Namespace创建/dev/spdk/nvmeXnY，如图2。Nvme-cli在监控管理NVMe设备的主要过程，既是组织相关命令信息，通过对NVMe设备文件(/dev/nvmeX,/dev/nvmeXnY)发起IOCTL系统调用，将命令传入内核继而发送请求到NVMe设备上；
用SPDK实现存储加速
lingshengxiyou的博客
11-26 832
存储部分qemu和SPDK用到大页内存，SPDK还需要独点cpu用轮询，需要确认openstack S版本是否能支持大页内存和vhost-nvme配置，nova-compute还需要从cinder获取volume信息，配置SPDK initiator。
[转]spdk 和nvme 预备知识1
weixin_30709061的博客
03-26 345
作者：拖鞋花短裤链接：https://www.jianshu.com/p/b11948e55d80来源：简书简书著作权归作者所有，任何形式的转载都请联系作者获得授权并注明出处。 需要提前了解的概念 Linux内核驱动： UIO： DPDK的官方文档http://doc.dpdk.org/guides/linux_gsg/linux_drivers.html#UIO说的比较...
Ceph 进阶系列（七）： Ceph Optimizations for NVMe
Yannick Jiang 的专栏
05-28 961
PDF Link as below: Ceph Optimizations for NVMe - flashmemorysummit.com
Ceph - 每个 NVMe 推荐安装1个还是2个 OSD？
最新发布
NewTyun的博客
12-14 195
新钛云服已累计为您分享778篇技术干货‍‍‍多年来我们遇到的最常见问题之一是用户是否应该在每个闪存驱动器上部署多个 OSD。这个问题比较复杂，因为随着Ceph的发展，这个问题的答案也在不停的变化。早在 Ceph Nautilus 时代，我们通常建议每个闪存驱动器部署2 个甚至 4 个 OSD。当时在每个闪存设备部署多个 OSD 时，特别是在使用 NVMe 驱动器时，会具有很明显的性能优势。但在 O...
SPDK对接Ceph性能优化
天翼云开发者社区
06-02 2029
SPDK是intel公司主导开发的一套存储高性能开发套件，提供了一组工具和库，用于编写高性能、可扩展和用户态存储应用。它通过使用一些关键技术实现了高性能：SPDK是一个框架而不是分布式系统，它的基石是用户态（user space）、轮询（polled-mode）、异步（asynchronous）和无锁的NVMe驱动，其提供了零拷贝、高并发直接用户态访问SSD的特性。SPDK的最初目的是为了优化块存储落盘性能，但伴随持续的演进，已经被用...
Ceph 使用 NVME 是否可以实现 10k 混合 IOPS ？
NewTyun的博客
09-20 159
新钛云服已累计为您分享765篇技术干货最近，ceph subreddit上的一位用户提了一个问题：在一个由 6 个节点组成，每个节点有 2 个 4GB FireCuda NVMe 磁盘的集群中，Ceph是否可以为单个客户端提供10K IOPs的组合随机读/写能力。该用户也想知道是否有人对类似的场景进行过测试并希望能够共享一下测试结果。在 Clyso 项目组中，我们一直在积极努力改进 Ceph 代码...
04-SPDK加速Ceph-XSKY Bluestore案例分享-扬子夜-王豪迈.pdf
01-25
3. **NVMe over Fabrics支持**：SPDK提供了对NVMe over Fabrics协议的支持，可以利用RDMA等技术实现高速数据传输。 4. **高性能内存管理**：SPDK包含了一套针对高性能存储应用优化的内存管理机制。 5. **灵活的缓冲...
Micron 9200 NVMe SSD与Ceph Luminous 12.2.8蓝石架构详解
本文档详细介绍了Micron 9200 MAX NVMe SSD与Ceph Luminous 12.2.8版本结合的参考架构。Micron 9200系列以其高性能和稳定性在存储解决方案中备受瞩目，而Ceph作为开源分布式存储系统，提供了灵活、可扩展的存储能力...
唯快不破？只快可不够，NVMe安全升级——SPDK引入NVMe Opal bdev支持
lingshengxiyou的博客
09-06 721
Opal是一系列的自加密盘 (SED, Self-Encrypting Drives) 的技术规范标准，由TCG这个联盟提出。TCG是一个由很多大公司组成的产业联盟， 主要是为可信计算制定一些标准。在可信计算领域具有非常高的权威性。自加密盘主要指的是这个盘本身具有全盘自动加密的功能。自加密盘上有专门负责加解密的硬件，所有数据在写到盘上的时候，会被自动加密，在读的时候会由盘自动去解密。所有这些加解密都依赖于盘上的硬件去完成。接下来，我们看两个非常重要的概念，DEK和AK。这是在Opal中会用到的两个密钥。
自下而上-存储全栈（TiDB/RockDB/SPDK/fuse/ceph/NVMe/ext4）存储技术专家成长路线
C/C++Linux、音视频、DPDK
12-08 782
数字化时代的到来带来了大规模数据的产生，各行各业都面临着数据爆炸的挑战。随着云计算、物联网、人工智能等新兴技术的发展，对存储技术的需求也越来越多样化。不同应用场景对存储的容量、性能、可靠性和成本等方面都有不同的要求。具备存储技术知识和技能的人才更具有竞争力。
XSKY借助英特尔SPDK提升Ceph性能
weixin_34408624的博客
07-04 523
NVMe是新一代的PCIe固态硬盘接口规范，其目的是统一主流厂商的SSD接口交互标准，并更好的对上层系统释放效率潜能。NVMe标准的倡导者包括英特尔、三星、美光、Oracle、微软、Dell、HGST、希捷等行业领先企业，2014年11月发布版本1.2标准。 市售的基于NVMe硬盘动辄可达到单盘GB级的读写带宽和十万量级的随机IOPS，为SATA固态硬盘...
[SPDK/NVMe存储技术分析]002 - SPDK官方介绍
weixin_30364147的博客
10-25 425
Introduction to the Storage Performance Development Kit (SPDK) | SPDK概述 By Jonathan S. (Intel), Updated December 5, 2016 Solid-state storage media is in the process of taking over the data cente...
[SPDK/NVMe存储技术分析]
hbcbgcx的博客
12-20 2610
https://www.cnblogs.com/vlhn/p/7727141.html NVMe概述 NVMe是一个针对基于PCIe的固态硬盘的高性能的、可扩展的主机控制器接口。 NVMe的显著特征是提供多个队列来处理I/O命令。单个NVMe设备支持多达64K个I/O 队列，每个I/O队列可以管理多达64K个命令。 当主机发出一个I/O命令的时候，主机系统将命令放置到提交队列(SQ)，然后使用...
centos7.2部署CEPH分布式存储
litaoa的专栏
12-20 312
centos7.2部署CEPH分布式存储 几台配置低的服务器倒下来了，正好需要搭建个平台。所以把所有资源整合了一下，每台服务器安装了esxi6.7和VCENTER后，发现启动了VSAN功能找不到注册码。没办只能是又换回了Esxi6.5，安装完成后发现6.5的Vsan不能用。先这样吧。6.5安装完成后，所有故障排错，然后正常启动。安装完所有服服务器后，又对所有服务器原有的硬盘打起了主意。想个办...
NVMeOF笔记
yfhmmm的博客
05-14 2740
1. 基本概念 1.1 Capsule NVMeoF使用 Capsule 来进行数据传输，有两种 Capsule ，1） command capsule，2）response capsule。 command capsule包含一个SQE（它是对NVMe over PCIe中SQE的修改和扩展）和一个可选的数据或SGL部分。 command capsule由主机下发给NVM SubSystem，最少要包含一个SQE，也就是64Byte。SQE中包含主机下发给NVM SubSystem的命令，NVMeoF中有
Ceph性能瓶颈分析与优化(混合盘篇)
流年似水的专栏
12-13 2398
ceph性能优化: 混合盘场景
关于vsan那些事之架构理解概述
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
07-10 1629
vSAN简介 vSAN定义：可以理解为软件定义的基于服务器集群搭建的分布式存储，vsan软件层作为ESXi虚拟化管理程序的一部分运行在物理机上。实际vmware整体就是一组软件定义的套件集成，包括还有以下几个大件： vSAN存储的管理程序由软件实现，通过硬件上层的软件实现开发、灵活、快速，适应企业对于存储的种种需求，分布式可以将数据、IO访问分散到多个节点，让整个存储系统随着节点的增多容量和性能线性增加。vSAN是ESXi虚拟机管理程序中包含的分布式软件层，它与VMware vSphere完全集成。vSa
分布式文件系统MFS、Ceph、GlusterFS、Lustre的比较
热门推荐
存储实验室
12-28 3万+
MooseFS(MFS) Ceph GlusterFS Lustre Metadata server 单个MDS。存在单点故障和瓶颈。 多个MDS，不存在单点故障和瓶颈。MDS可以扩展，不存在瓶颈。 无，不存在单点故障。靠运行在各个节点上的动态算法来代替MDS,不需同步元数据,无硬盘I/O瓶颈。 双MDS(互相
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值