如何使用ycsb工具对mongodb进行性能测试过程

情勤坊

已于 2023-12-16 22:30:12 修改

阅读量571

点赞数

文章标签： mongodb 数据库

于 2023-12-16 22:02:10 首次发布

本文链接：https://blog.csdn.net/qq_41568648/article/details/135038571

版权

测试环境：
linux系统：Centos 7.2 ,版本：Red Hat 4.8.5-44)
YCSB简介
ycsb是一款性能测试工具，用Java写的，并且什么都可以压，像是mongodb，redis，mysql，hbase，等等，感觉还是很厉害的。并且是有apache2.0的认证的，官网在github上，有讲如何安装和使用，
其中mongodb压测文档
首先安装JDK：链接：https://pan.baidu.com/s/1iqRO0nXNpZwnmPAPYM7RYg
提取码：jack
还有maven
链接：https://pan.baidu.com/s/1rt_memiTSfEc5iJRwQ3LZw
提取码：jack
ycsb下载包：
链接：https://pan.baidu.com/s/1ve3bJWW2j_MczKHowhhWgg
提取码：jack

安装 java和maven的过程省略，可以参考：
https://www.cnblogs.com/testlearn/p/15693366.html

解压安装包
tar -zxvf ycsb-0.5.0.tar.gz
到此，环境部署完成！

输入命令简单验证下环境是否可用

./bin/ycsb load mongodb
正常情况显示下图内容
在这里插入图片描述
执行参数讲解可以参考：
https://blog.csdn.net/qq_36967200/article/details/126195544
执行压测参数示例：
recordcount=1000
operationcount=800
workload=site.ycsb.workloads.CoreWorkload

readallfields=true

readproportion=0.5
updateproportion=0.5
scanproportion=0
insertproportion=0
readmodifywriteproportion=0.5

requestdistribution=zipfian

fieldcount=50
fieldlength=12
insertstart0=1
mongodb.upsert=true
mongodb.url=mongodb://admin:XXX@127.0.0.1:37017/test?authSource=admin
mongodb.database=test
table=test003
threadcount: 1

本人亲测的总结：
若想重复执行脚本，避免报 _id 重复的问题，需要添加参数mongodb.upsert=true；
若需要提高性能，但是受限于机器的核数，threadcount: 8；
若需要测试更新事件，则 updateproportion 的值比 insertproportion 大，
发现这两个值，谁的值大就执行谁的操作；
若要指定每秒写入的数据量，则执行命令时在最后添加参数 -target 2000
则表示每秒最多执行1000个操作，当一秒内到达这个阈值，线程就会休眠1毫秒。
示例：…/./bin/ycsb load mongodb -P 1-workload -target 2000