如何使用ycsb工具对mongodb进行性能测试过程

测试环境:

linux系统:Centos 7.2 ,版本:Red Hat 4.8.5-44)

YCSB简介

ycsb是一款性能测试工具,用Java写的,并且什么都可以压,像是mongodb,redis,mysql,hbase,等等,感觉还是很厉害的。并且是有apache2.0的认证的,官网在github上,有讲如何安装和使用,

其中mongodb压测文档

首先安装JDK:链接:https://pan.baidu.com/s/1iqRO0nXNpZwnmPAPYM7RYg

提取码:jack

还有maven

链接:https://pan.baidu.com/s/1rt_memiTSfEc5iJRwQ3LZw

提取码:jack

ycsb下载包:

链接:https://pan.baidu.com/s/1ve3bJWW2j_MczKHowhhWgg

提取码:jack

安装 java和maven的过程省略,可以参考:

https://www.cnblogs.com/testlearn/p/15693366.html

解压安装包

tar -zxvf ycsb-0.5.0.tar.gz

到此,环境部署完成!

输入命令简单验证下环境是否可用

./bin/ycsb load mongodb

正常情况显示下图内容

执行参数讲解可以参考:

https://blog.csdn.net/qq_36967200/article/details/126195544

执行压测参数示例:

recordcount=1000

operationcount=800

workload=site.ycsb.workloads.CoreWorkload

readallfields=true

readproportion=0.5

updateproportion=0.5

scanproportion=0

insertproportion=0

readmodifywriteproportion=0.5

requestdistribution=zipfian

fieldcount=50

fieldlength=12

insertstart0=1

mongodb.upsert=true

mongodb.url=mongodb://admin:XXX@127.0.0.1:37017/test?authSource=admin

mongodb.database=test

table=test003

threadcount: 1

本人亲测的总结:

若想重复执行脚本,避免报 _id 重复的问题,需要添加参数mongodb.upsert=true;

若需要提高性能,但是受限于机器的核数,threadcount: 8;

若需要测试更新事件,则 updateproportion 的值比 insertproportion 大,

发现这两个值,谁的值大就执行谁的操作;

若要指定每秒写入的数据量,则执行命令时在最后添加 参数 -target 2000

则 表示每秒最多执行1000个操作,当一秒内到达这个阈值,线程就会休眠1毫秒 。

示例:..././bin/ycsb load mongodb -P 1-workload -target 2000

相关推荐
倔强的石头_8 小时前
《Kingbase护城河》——猎捕慢查询:执行计划的微观解析与索引调优实战
数据库
SelectDB10 小时前
Apache Doris Python UDF:让 SQL 直接调用 Python 生态,支撑 Agent 时代复杂业务逻辑
大数据·数据库·python
葫芦和十三19 小时前
图解 MongoDB 22|读写关注:持久性与一致性的档位选择
后端·mongodb·agent
葫芦和十三1 天前
图解 MongoDB 21|选举与 failover:Primary 是怎么选出来的
后端·mongodb·agent
jiayou642 天前
KingbaseES 表级与列级加密完全指南
数据库·后端
葫芦和十三2 天前
图解 MongoDB 19|Oplog:复制的真正载体,不是文档是操作
后端·mongodb·agent
葫芦和十三2 天前
图解 MongoDB 20|复制延迟与 catch up:Secondary 为什么跟不上
后端·mongodb·agent
GBASE2 天前
G术时刻 |GBase 8s数据库事务并发控制之封锁技术介绍(下)
数据库
xiezhr3 天前
逛GitHub发现了一款免费的带AI功能的数据库管理工具
数据库·ai编程·dba
吃糖的小孩4 天前
给 QQ AI 机器人设计“可控记忆”:会话摘要、手动长期记忆与角色卡边界
数据库