Intel® QAT加速卡之Linux上编程说明

最新推荐文章于 2024-07-20 09:22:37 发布
最新推荐文章于 2024-07-20 09:22:37 发布
阅读量5.8k 收藏 4
点赞数
分类专栏： QAT加速技术 文章标签： QAT Intel® QAT
原文链接：https://editor.csdn.net/md?articleId=107924289
版权

QAT Software for Linux

1. Introduction

该程序员指南提供了有关软件体系结构和使用指南的信息。 相关的英特尔®QAT软件库文档中记录了有关使用英特尔QuickAssist技术（英特尔®QAT）API的信息，这些API提供了加速服务（加密和数据压缩）的接口。

1.1 术语

  • 软件包用作硬件版本1.7的英特尔®QAT软件包的通用术语
  • 加速驱动程序用作允许英特尔®QAT软件库API访问英特尔®QAT端点的通用术语

Table 1. 常用术语列表

TermDescription
ADFAcceleration Driver Framework
AESAdvanced Encryption Standard
ASICApplication Specific Integrated Circuit
BDFBus Device Function
CBCCipher Block Chaining mode
CCMCounter with CBC-MAC mode
CnVCompress and Verify
CnVnRCompress and Verify and Recover
CYCryptography
DCData Compression
DIDDevice ID
DMADirect Memory Access
DTLSDatagram Transport Layer Security
DRAMDynamic Random Access Memory
DSADigital Signature Algorithm
ECCElliptic Curve Cryptography
EVPEnvelope (OpenSSL high-level cryptographic functions)
GCMGalois/Counter Mode
GPLGeneral Public License
HMACHash-based Message Authentication Mode
IAIntel® Architecture
IDS/IPSIntrusion Detection System/Intrusion Prevention System
IEEEInstitute of Electrical and Electronics Engineers
IKEInternet Key Exchange
Intel® QATIntel QuickAssist Technology
IOCTLInput Output Control function
IOMMUInput-Output Memory Management Unit
IPSecInternet Protocol Security
LKCFLinux* Kernel Cryptographic Framework
MGFMask Generation Function
MSIMessage Signaled Interrupts
NUMANon-uniform Memory Access
PCHPlatform Controller Hub. In this manual, a Platform Controller Hub device includes standard interfaces and Intel® QAT Endpoint and I/O interfaces.
RSARivest-Shamir-Adleman
SALService Access Layer
SATASerial Advanced Technology Attachment
SGLScatter Gather List
SHASecure Hash Algorithm
SoCSystem-on-a-Chip
SPISerial Peripheral Interconnect
SR-IOVSingle Root I/O Virtualization
SSCStorage Subsystem Class
SSLSecure Sockets Layer
TCGTrusted Computing Group
TLSTransport Layer Security
TPMTrusted Platform Module
USDMUser Space DMA-able Memory
VFVirtual Function
VPNVirtual Private Network
WANWide Area Network

Table 2. 文档索引编号

DocumentDocument #/ Location
Intel QuickAssist Technology Software for Linux* Release Notes (Hardware Version 1.7)336211
Intel QuickAssist Technology Software for Linux* Getting Started Guide (Hardware Version 1.7)336212
Intel QuickAssist Technology API Programmer’s Guide330684
Intel QuickAssist Technology Cryptographic API Reference Manual330685
Intel® QuickAssist Technology Data Compression API Reference Manual330686
Using Intel® Virtualization Technology (Intel® VT) with Intel QuickAssist Technology Application Note330689

1.2 印刷说明

略。

2. Software Overview

除了第3.1节“硬件/软件概述”中提到的硬件外，各个平台还包含一些重要的软件组件，这些组件是产品的一部分。 该软件包括在英特尔®架构（IA）CPU和英特尔®QAT端点上运行的驱动程序和加速代码 。

2.1 通讯芯片系列兼容性

尽管本文档的重点是针对硬件版本1.7的英特尔®QAT软件，但也支持英特尔®通信芯片组8925至8955系列。

2.2 逻辑实例

逻辑实例可被视为通往硬件的通道。 逻辑实例允许地址域（即内核空间和单个用户空间进程）配置要由该地址域使用的环，并定义该环的行为。
逻辑实例详细说明及各结构间的组织关系

2.2.1 响应处理

  • 在内核空间中，可以将每个逻辑实例配置为在以下其中一个中运行：两种模式：

    • 中断模式
    • 轮询模式

  • 在用户空间中，可以将每个逻辑实例配置为在两个实例之一中运行模式：

    • 轮询模式

    • epoll轮询模式

2.2.1.1 中断模式

只有在内核空间中才支持中断模式。 在用户空间中，不再支持中断模式； 因此，不能再将用户空间实例配置为中断模式。在中断模式下配置时，加速器驱动程序框架（ADF）注册一个中断处理程序到响应环处理中。由于服务中断的等待时间可能很昂贵，因此硬件辅助环提供了一种机制，可将中断成本摊销为（可为多个响应提供服务的）单个中断。 配置文件的中断合并部分允许用户选择使用以下方法摊销响应中断：基于时间的中断方案或基于响应数的方案。

ADF注册了一个中断处理程序来处理环形存储区中断。 触发中断时，ADF为该中断提供服务并创建一个中断处理程序的下半部分，以消耗响应环的响应。 当支持MSI-X时，将创建中断处理程序的下半部分并将其关联到已配置的内核， 对应用程序代码的回调发生在此Tasklet的上下文中。 下图显示了此序列（为清楚起见，对整个处理流程进行了精简）。

在这里插入图片描述

2.2.1.2 Polled Mode

由于使用中断服务和在中断下半部中执行中断处理程序成本较高，用户不想使用中断模式，则可以选择禁用中断并轮询响应。 通过将配置文件中逻辑实例的Dc / CyXIsPolled属性设置为1，可以基于每个逻辑实例配置此机制。配置为1时，ADF不为该逻辑实例提供中断服务。

  • ADF框架提供了一组API，允许客户轮询给定加速器上的单个存储区或所有存储区：

  • icp_sal_pollBank ： 轮询指定加速器上指定存储区上的响应环

  • icp_sal_pollAllBanks ：轮询指定加速器上所有存储区上的响应环

  • 服务访问层（SAL）提供了一组API来轮询单个逻辑实例：

  • icp_sal_CyPollInstance ： 轮询特定的加解密逻辑实例

  • icp_sal_DcPollInstance ：轮询特定的数据压缩逻辑实例

2.2.1.3 Epolled Mode

基于事件的轮询模式称为“ epoll模式”。 英特尔®QAT技术驱动程序的新模式支持Linux epoll接口。 Linux epoll是一种可扩展的I / O事件通知机制，旨在替代较早的select / poll系统调用。

要使用Linux epoll，用户空间应用程序需要使用以下API：

  • ***epoll_create（）/ epoll_create1（）***：创建一个epoll实例并返回引用该实例的文件描述符
  • ***epoll_ctl（）***：在发生轮询的地方注册文件描述符。
  • ***epoll_wait（）***：等待通过epoll_ctl注册的文件描述符的I / O事件，如果当前没有可用事件，则阻塞调用线程。

驱动程序的epoll模式由两部分组成：内核空间部分和用户空间部分。合并字段为epoll模式公开了相同的行为。 如果通过更改合并字段延迟了中断，则向用户空间的事件传递也将延迟。

要启用epoll模式，请确保遵循以下步骤：

①. 在配置文件中，请对用户空间实例使用“ IsPolled = 2”； 例如：

Cy0Name = “SSL0”
Cy0IsPolled = 2

②. 无论应用程序以同步方式还是异步方式使用驱动程序，它都应创建一个线程来调用英特尔®QuickAssist Technology驱动程序的epoll API和Linux标准epoll接口。

QAT驱动程序的epoll API接口如下：

Crypto: 
	icp_sal_CyGetFileDescriptor() 
	icp_sal_CyPutFileDescriptor()
Compression: 
	icp_sal_DcGetFileDescriptor() 
	icp_sal_DcPutFileDescriptor()

Linux 标准epoll接口如下：

	epoll_create() 
	epoll_ctl() 
	epoll_wait()

当存储区采用epoll模式时，这意味着该存储区只有一个实例（加密或压缩）。 当某一个进程正在使用此实例时，意味着此进程是该存储区的唯一用户。 其他进程暂时无法使用此存储区。 但是，如果进程释放该实例，则其他进程可以使用该库。 由于该存储区只有一个实例，因此最多有16个用户空间实例可用于为epoll模式配置所有存储区。 （对于英特尔®通信芯片组8925-8955系列，最多可以使用32个用户空间实例。）

如果一个进程需要同时提供压缩和加密服务，则将需要两个实例，这意味着该进程需要两个存储体。 在这种情况下，最多只能使用八个进程。 （对于英特尔®通信芯片组8925-8955系列，最多可以使用16个进程。）

为了进行比较，当CPU处于空闲状态时，对于用户空间实例，标准轮询模式（“ IsPolled = 1”）将定期轮询空环，并且轮询将消耗一些CPU周期（例如当CPU处于空闲状态时，CPU使用率可能维持在2％ ）。 但是，如果使用epoll模式，则当CPU处于空闲状态时，CPU使用率将保持为0％。

对于用户空间实例，不再支持中断模式。 当响应环中没有数据时，用户空间的中断模式不会占用CPU周期，而与轮询模式不同，轮询模式会按指定的时间间隔继续进行检查。 有了epoll支持，可以使用标准的Linux * epoll API，例如epoll_create（）/ epoll_ctl（）/ epoll_wait（）。

目前，大多数Web服务器和基于套接字的应用程序（例如Nginx *，Apache *等）都会使用epoll / select / poll之一来进行通知(当套接字可用于读取或写入时)，然后采取适当的措施。 通过epoll模式，QAT驱动程序将与现有应用程序进行更无缝的集成，例如作为Nginx *，因为它将使用标准的通知机制。

叨陪鲤
关注
专栏目录
ssl加速卡_OpenSSL异步模式与Intel QAT加速卡(一)
weixin_28781243的博客
01-17 1445
这周工作遇到一个超越原先认知范围的问题，今天下午开始写这篇博文之前依然束手无策，但就刚刚被别部门给力的队友解决了！今天所写的技术都是出初步接触，所以如果有大神直接使用过OpenSSL的异步模式去对接QAT engine进行RSA解密或者gzip等密集计算的(尤其是多线程使用)，跪求出来指点与指正～一、问题综述我们Workflow作为一个性能优异的异步调度框架，用作server可以对标的系统之一就是...
QAT-for-software.pdf
08-11
《Intel QuickAssist Technology Software for Linux程序员指南》是Intel公司为使用Linux系统开发QAT加速卡应用程序提供的关键参考资料。QAT（QuickAssist Technology）是Intel推出的一种硬件加速技术，旨在提升数据...
英特尔QAT加速卡说明（二）
墨染锦年的博客
03-17 4万+
异步模式操作 加速卡支持同步和异步操作模式。在同步模式下，API将阻塞，直到加速操作完成后才返回到调用代码。 在异步模式下，API将在请求提交到加速器后返回调用代码。当加速器完成操作时，通过调用回调函数来通知完成。 从性能角度看，加速器需要每个加速引擎有多个挂起的请求，提交多个未完成的请求才能最小化加速引擎上的处理延迟，实现最大的吞吐量。对于同步操作模式，必须使用多个线程来确保有多个请求。多线程的...
qat-driver-rpm:cwyang的Intel QAT驱动程序RPM软件包
03-18
cwyang的QAT驱动程序RPM软件包 感谢造访！ 英特尔的QAT RPM驱动程序在目标计算机上构建内核模块时，该RPM软件包提供了预构建的内核模块。 这是我的第一个RPM包装经验，花了几个晚上.. :hot_beverage:将QAT驱动程序打包到RPM。 您现在可以给我买杯咖啡！ :grinning_face_with_smiling_eyes: 可以通过rpmbuild --define "key value"指定以下数据： orgname [RPM构建文件位于/opt/{orgname} ] kver [用于构建驱动程序的内核版本。如果省略，请使用正在运行的内核] privkey [内核模块签名私钥文件。如果省略，则没有任何标志] pubkey [内核模块签名公钥文件]
【实践】Intel QAT技术硬件加速方案在数据安全处理、网络连接场景下性能验证
最新发布
sinat_34953318的博客
07-20 49
在网络连接应用场景中，使用QAT加速能够保证Nginx服务器的性能保持稳定，在线程数较低时，使用QAT加速Nginx能最大限度的调用cpu性能来保证Nginx的网络连接性能，而不使用QAT加速会导致Nginx实际调用cpu达不到预定的工作进程数，实际性能会远低于预期。测试结果：在使用QAT的情况下，OpenSSL单位时间内能够执行的签名操作数量提升约18倍，OpenSSL 库在单位时间内能够执行的验证操作数量提升了3倍左右，同时Openssl对CPU的占用率下降了约50%。
Intel® QAT加速卡之编程demo框架
遇见你是我最美丽的意外
08-08 4939
QAT demo流程框架 示例一： 代码路径：qat1.5.l.1.13.0-19\quickassist\lookaside\access_layer\src\sample_code\functional\sym\cipher_sample |-->cpa_cipher_sample_user.c | main | |--> qaeMemInit | | | |--> icp_sal_userStartMultiProcess | |
【Intel QAT】编译QAT自带的功能测试Sample的方法
KXue0703的博客
01-04 531
如下图所示，修改ccat/quickassist/lookaside/access_layer/src/sample_code/functional/Makefile文件，将156行的代码屏蔽掉，就不会再出上面的问题了。第2章节中修复的bug的思路略显粗暴，找到”根”才是出了问题之道。添加如下的这个库，就能解决找不到osalHashSHA512Full的问题。
英特尔QAT加速卡说明（一）
热门推荐
墨染锦年的博客
03-17 5万+
英特尔Quick Assist Technology （以下简称QAT）是英特尔针对网络安全和数据存储推出的一个硬件加速技术。QAT支持对称数据加密算法（如AES）中的密码操作和验证操作运算和公钥非对称数据加密算法（如RSA、椭圆曲线等）中的加密运算。 逻辑实例 可以将逻辑实例视为到硬件的通道。逻辑实例允许地址域(即内核空间和单个用户空间进程)配置由该地址域使用的环，并定义该环的行为。QAT Ac...
icp_qat_hal.rar_Linux/Unix编程_Unix_Linux_
08-11
"icp_qat_hal.c"很可能包含了主要的驱动函数，如初始化、设备探测、数据传输等操作，而"cikd.c"可能是与之相关的辅助模块，如中断处理、上下文管理等功能。源代码分析可以揭示驱动如何与内核通信，以及如何利用特定...
intel qat 编程手册txt版本
11-07
intel qat 编程手册txt版本
IEEE Std 802.1QAT
12-07
IEEE Stream Reservation Protocol (SRP) protocol, this standard amends IEEE Std 802.1Q™-2005, providing protocols, procedures, and managed objects, usable by existing higher layer mechanisms, that allow network resources to be reserved for specific traffic streams traversing a bridged local area network.
【QAT】英特尔QAT加速技术|Intel QuickAssist Technology
小鱼菜鸟的博客
08-13 1236
英特尔QAT加速卡说明(一) https://blog.csdn.net/qq_44710568/article/details/104915276 英特尔QAT加速卡说明(二) https://shiyixin.blog.csdn.net/article/details/104915469 相关测试： http://www.axiomtek....
Intel® QAT加速卡之Ring & Ring Bank
遇见你是我最美丽的意外
08-12 5189
1. QAT的应用模式 Intel® 通讯系列芯片对于每种受支持的加速服务（加密，数据压缩），都支持以下应用模式： 内核模式，其中应用程序和加速服务都在内核中运行空间。 用户空间直接访问在用户空间中运行的加速服务。 在此模型中，应用程序和加速服务都在用户空间中运行，并且还可以从用户空间执行对硬件的访问。 上图中的Intel® QuickAssist Technology API与操作系统无关，并且在内核或用户空间中具有相同的功能签名。 SAL组件也与操作系统无关，可以编译为用户空间库或内核空间模.
Intel® QAT加速卡之性能简介
遇见你是我最美丽的意外
08-09 1万+
Intel® QuickAssist Adapter 8950 设备简介 支持英特尔®QuickAssist技术的英特尔®QuickAssist适配器提供加密加速和压缩加速服务。 1. Key features Intel® 的QAT技术支持IPsec， SSL协议的加解密加速和数据压缩服务。 Intel® DH8955控制器具有良好的可扩展性能 支持SR-IOV （SR-IOV是Single Root I/O Virtualization的缩写，属于虚拟化技术。） 体积小，薄型，PCIe插槽
Intel® QAT加速卡之逻辑实例
遇见你是我最美丽的意外
08-11 5191
Intel QAT加速卡逻辑实例 1. QAT相关的名词组织关系 在本手册中描述的平台上，处理器可以连接到一个或多个英特尔®通信芯片组8925至8955系列（PCH）设备。 从软件角度来看，每个PCH设备都包含一个逻辑加速器。 从物理上讲，每个设备都包含多个加速器，这些加速器被负载均衡硬件组件抽象成一个加速器， 发送到一个逻辑加速器的所有请求将在PCH设备内的各个物理加速器之间自动进行负载均衡。 对软件来说，只需要操作一个逻辑加速器即可，可以大大简化应用程序的编程方式，提高工作效率。 一组32个环形存储区
Intel® QAT加速卡之加密、哈希操作流程和示例
遇见你是我最美丽的意外
08-18 5664
Intel® QAT 加密API介绍 文章主要讲述了Intel® QAT 加密API接口的说明，以及多种应用场景下的使用方法。 1. 概述 Intel® QAT加速卡API接口可以分为以下几类： 通用类(common)：这是由文件cpa_cy_common.h定义的。 主要包括用于QAT加速服务的初始化和关闭操作。 实例管理(Instance Management)：文件cpa_cy_im.h定义了用于管理实例的功能。 对称算法API(Symmetric): 它是由以下几个文件中共同定义组成的。 cpa
Intel® QAT加速卡之同步异步模式
遇见你是我最美丽的意外
08-13 4934
QAT 的两种操作模式 Intel® QAT API同时支持同步和异步两种操作模式。 为了获得最佳性能，该应用程序应能够向加速引擎提交多个未完成的请求。 提交多个未完成的请求可最大程度地减少加速引擎上的处理延迟。 这可以在应用程序中通过异步提交请求或使用多线程以同步模式提交请求来完成。开发人员可以选择最适合其应用程序和系统架构的操作模式。 下面对Intel® QAT的两种操作模式进行简单说明。 1. 异步操作 如果使用QAT的异步处理功能，用户需要通过API接口注册一个回调函数，如图3所示。一旦请求被发送到
【dpdk】IntelQAT技术
metaopen的博客
01-24 1384
QAT支持硬件加速Deflate无损压缩算法，在处理海量数据时，QAT在不增加CPU开销的前提下，通过压缩来减少需要传输和存盘的数据量，从而减少了网络带宽和磁盘读写的开销，最终提高了整体的系统性能。例如，在Web Serer上使用QAT硬件加速压缩处理，可将CPU从繁重的压缩计算中解放出来，以处理更多的连接请求。该方案利用QAT芯片分担对称/非对称加密计算,DEFLATE无损压缩等大计算量的任务，来降低CPU使用率并提高整体平台性能。该方案可以主板芯片，独立的PCI-E加速卡或者SOC三种方式部署。
Intel QAT 加速卡驱动加密API详解
"2020年3月20日发布的Intel QAT（QuickAssist Technology）加速卡驱动程序加密API参考手册，该手册详细介绍了API的定义、结构及其使用方法，适用于API版本2.3。文档编号为330685-006，内容基于2020年3月16日的源代码...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值