Vdbench----文件系统IO，一致性校验，常见问题

最新推荐文章于 2024-09-18 15:41:55 发布
最新推荐文章于 2024-09-18 15:41:55 发布
阅读量3.4k 收藏 9
点赞数
文章标签： 运维 python 操作系统
原文链接：https://my.oschina.net/linjiezang/blog/1801976
版权
本文介绍了如何在Linux环境下使用Vdbench进行多客户端的文件系统IO测试，包括解决avahi-daemon服务的问题、配置多客户端互信、设置Vdbench的配置文件以及数据一致性校验。详细阐述了Vdbench的参数使用，如-v和-j参数的校验机制，以及常见问题解答，如数据校验、日志过滤和各种参数的含义。
摘要由CSDN通过智能技术生成

2019独角兽企业重金招聘Python工程师标准>>> hot3.png

 

  • Linux环境----多客户联机运行

注意，此时会出现avahi-daemon服务的报错日志信息：

Linux system log avahi-daemon[3733]: Invalid query packet

关闭即可：systemctl stop avahi-daemon

avahi-daemon是一种Linux操作系统上运行在客户机上实施查找基于网络的Zeroconf service的服务守护进程。 该服务可以为Zeroconf网络实现DNS服务发现及DNS组播规范。 用户程序通过Linux D-Bus信息传递接收发现到网络服务和资源的通知。该守护进程配合缓存用户程序的答复，以帮助减少因答复而产生的网络流量。

  1. 每个客户的都需要安装vdbench，路径保持一致
  2. SSH互联，选一个客户的为父节点，把每个子节点都信任父节点

  父节点为93.93.41.5，子节点为93.93.41.6

  ssh-keygen -t rsa                           生成秘钥

  chmod 755 /root/.ssh/                    修改生成秘钥的权限

  scp /root/.ssh/id_rsa.pub 93.93.41.6:/root/.ssh/authorized_keys 拷贝公钥

  3.  验证SSH互信

  在父节点上ssh每一个子节点，如果不需要输入秘钥就能登录，则互信成功。

 4 多客户端配置文件

 hd=default,dbench=/home/Vdbench/,user=root,shell=ssh

 hd=hd1,system=93.93.31.7

 hd=hd2,system=93.93.41.8

 hd=hd3,system=93.93.41.9

 fsd=fsd1,anchor=/tmp/yht/client1,depth=2,width=100,files=2000,size=100m,shared=yes

 fsd=fsd2,anchor=/tmp/yht/client2,depth=1,width=1000,files=2000,zies=(20m,40,100m,60),shared=ye

最低0.47元/天 解锁文章
weixin_33739541
关注
GLM-130B本地部署的实战方案
herosunly的博客
07-04 7万+
本文主要介绍GLM-130B本地部署的实战方案，希望对学习大语言模型的同学们有所帮助。需要说明的是GLM-130B是未进行微调的版本，还无法达到ChatGLM-130B的效果。 文章目录 1. 介绍 2. 配置环境 2.1 安装虚拟环境 2.2 安装依赖库 3. 运行GLM-130B模型
vdbench的作用_Vdbench----文件系统IO，一致性校验，常见问题
weixin_39926016的博客
12-24 688
Linux环境----多客户联机运行注意，此时会出现avahi-daemon服务的报错日志信息：关闭即可：systemctl stop avahi-daemonavahi-daemon是一种Linux操作系统上运行在客户机上实施查找基于网络的Zeroconf service的服务守护进程。 该服务可以为Zeroconf网络实现DNS服务发现及DNS组播规范。 用户程序通过Linux D-Bus信息...
vdbench-show:vdbench测试数据可视化
07-24
思路：拿到vdbench的数据结果，使用工具或者python，将数据json化；然后写一个html页面，使用Ajax，拿到json文件并通过echarts展示之 vdbench数据处理 一般vdbench的数据都长这样： 数据先预处理一波，我使用的是shell语句预处理 cat run.log | grep "[00-59]:[00-59]" | grep -v "[a-zA-Z]\|*" | awk '{print $1,$2,$3}' > newrun.log 方式一 转json工具是 首行手动加入 time keep speed 最后长这样： 使用 node .\index.js --i=./Input/test.txt --o=./Input/txt.json -h 方式二 python处理 # coding=utf-8 import re import json impor
vdbench测试参数---一文读懂
最新发布
weixin_43948680的博客
09-18 1175
清晰介绍vdbench参数及示例，一文读懂他
vdbench数据一致性校验原理 ===> Data Validation Key miscompare. Expecting key .
zangjiaoshou的博客
06-11 7658
vdbench 数据一致性校验问题汇总：校验参数点击打开链接含义请自查：-jn-vr -vtvdbench配置中，校验方式：create_anchors=yes validate=yes validate=read validate=read_after_write validate=no_preread validate=time journal=yes journal=noflu...
打印vdbench数据，分析数据一致性问题
zangjiaoshou的博客
06-16 2254
将字符串转为16进制ascii码并输入到另一个字符串中#include<stdio.h> #include<stdlib.h> #include<memory.h> char src[256] = "/home/inspur"; void main(int argc, char *argv[]) { snprintf(src ,sizeof(src), "...
【存储测试】vdbench存储性能测试工具
热门推荐
Luxf0的博客
10-22 3万+
 vdbench是一个I/O工作负载生成器，通常用于验证数据完整性和度量直接附加（或网络连接）存储性能。它可以运行在windows、linux环境，可用于测试文件系统或块设备基准性能。
commons-fileupload-1.2.1.jar和commons-io-1.3.2.jar程序文件
07-23
`commons-io-1.3.2.jar`则是Apache Commons IO项目的一个较旧版本，它提供了一系列通用的IO操作工具类，这些工具类在处理文件、流、读写操作等方面非常有用。在处理文件上传时，Commons IO库可能被用来进行以下操作...
上传文件的jar包 commons-io commons-fileupload.jar
05-18
在Java开发中，上传文件是一项常见的任务，尤其是在构建Web应用时。`commons-io`和`commons-fileupload`是Apache开源组织提供的两个非常重要的库，它们为文件上传提供了强大的支持。这两个库结合使用，可以帮助...
java基础教程----精华版
09-22
- 线程同步机制，如synchronized关键字，Lock接口，避免多线程环境下数据不一致问题。 8. **网络编程**： - 使用Socket编程进行客户端/服务器通信，如ServerSocket和Socket类。 - URL和URLConnection类用于访问...
vdbench50407.rar
10-24
vdbench是一个 I/O 工作负载生成器，用于验证数据完整性和度量直接附加和网络连接的存储的性能。它是一个免费的工具，容易使用，而且常常用于测试和基准测试。 一般使用vdbench测试磁盘和文件系统的读写性能。 下载解压之后，包括vdbench50407.zip和英文版用户手册
vdbench测试文件系统读写性能
Achilles的博客
03-05 5605
1. 测试读写性能 文件系统测试采用文件大小1G，文件个数256，文件深度1，随机写；若要测试读性能将operation改为read，若要测试顺序读写将fileio改为sequential。 test_write脚本如下： messagescan=no fsd=fsd1,anchor=/ori_data,depth=1,width=1,files=256,size=1G,openflags=o_sync fwd=fwd1,fsd=fsd1,operation=write,fileio=random,x
ceph存储 ceph集群性能测试vdbench
skdkjxy的专栏
11-30 7051
Vdbench使用小结 vdbench 是一个 I/O 工作负载生成器，用于验证数据完整性和度量直接附加和网络连接的存储的性能。它是一个免费的工具，容易使用，而且常常用于测试和基准测试。 　　我们得出的结论是，缓存是I/O 基准测试中的一个重要元素。本文介绍我们设置基准测试的步骤并展示结果。但是首先我们会简要介绍我们使用的以下产品和工具。 基准测试设置 　　首先从 SmartClo
文件系统测试工具
DeamonXiao的博客
10-21 2250
参考链接： https://blog.csdn.net/liuaigui/article/details/7240706 pjdftest 测试 posix 接口工具。 安装教程 git clone https://github.com/pjd/pjdfstest.git cd pjdfstest/ autoreconf ifs ./configure make pjdfstest 使用方法 # cd /path/to/filesystem/under/test # prove -rv /pa.
Vdbench工具安装使用
weixin_42241611的博客
05-02 7695
一、 概述 1.1 内容简介 Vdbench 是一个命令行使用程序，旨在帮助工程师和客户生成用于验证存储性能和存储数据完 整性的磁盘 I/O 负载。还可通过输入文本文件指定 Vdbench 执行参数。它是一个免费的工具，容 易使用，而且常常用于测试和基准测试。 本指南向读者介绍 Vdbench 工具在在 Linux 和 Windows 平台安全使用，对快速学习该工具提 供参考。 文档包含以下内容： 安装配置 常用参数详解 常用测试用例 1.2 产品版本 ...
【ceph】vdbench使用教程--裸盘和文件系统测试vdbench
bandaoyu的note
11-27 1万+
目录 即看即用 详细说明 vdbench简介 常用执行选项和参数文件说明 1、文件系统 2、块设备（裸盘测试） 运行使用 1、单机运行 2、联机运行 结果分析 1、输出文件 2、结果分析 测试说明 1、测试总结 2、常见测试参数 即看即用 测试一下vdbench的可用性：进入vdbench相应目录下 ./vdbench -t 运行测试模型 ./vdbench -f {filename} -o {exportpath} #注：-f后接测试参数文件名，-o后接导出测试.
microsoft store保存路径_VBA 实践指南 -- 网络请求Microsoft.XMLHttp
weixin_39907289的博客
11-24 288
大家在使用VBA的过程中，一般不会涉及到网络请求方面的需求。简单的办公自动化已经可以满足大部分场景的需求，能快速的提升工作效率。实际上，在开发excel-vba的插件，模块或工具的过程中，经常会遇到网络数据请求等情况，Microsoft.XMLHttp库就提供网络方面的服务。Microsoft.XMLHttp，顾名思义就是网络请求库，vba可以直接创建调用使用步骤：创建XMLHTTP对象 打开与服...
vdbench数据校验翻译
u010322362的专栏
05-01 1326
本文翻译自vdbench的使用手册中的数据校验章节，如有纰漏，还请不吝赐教。 vdbench源码下载地址：https://www.oracle.com/downloads/server-storage/vdbench-source-downloads.html 数据校验在性能测试的时候不应该被使用，处理器开销可能影响性能测试的结果。 在我开始之前，我想问一个想了很多次的问题：“为什么我使用vdbench去检查数据冲突？我也可以写一个大文件，计算校验和，然后重新读这个文件并比较校验和。”当然，你可.
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值