如何使用ycsb工具对mongodb进行性能测试过程

测试环境:

linux系统:Centos 7.2 ,版本:Red Hat 4.8.5-44)

YCSB简介

ycsb是一款性能测试工具,用Java写的,并且什么都可以压,像是mongodb,redis,mysql,hbase,等等,感觉还是很厉害的。并且是有apache2.0的认证的,官网在github上,有讲如何安装和使用,

其中mongodb压测文档

首先安装JDK:链接:https://pan.baidu.com/s/1iqRO0nXNpZwnmPAPYM7RYg

提取码:jack

还有maven

链接:https://pan.baidu.com/s/1rt_memiTSfEc5iJRwQ3LZw

提取码:jack

ycsb下载包:

链接:https://pan.baidu.com/s/1ve3bJWW2j_MczKHowhhWgg

提取码:jack

安装 java和maven的过程省略,可以参考:

https://www.cnblogs.com/testlearn/p/15693366.html

解压安装包

tar -zxvf ycsb-0.5.0.tar.gz

到此,环境部署完成!

输入命令简单验证下环境是否可用

./bin/ycsb load mongodb

正常情况显示下图内容

执行参数讲解可以参考:

https://blog.csdn.net/qq_36967200/article/details/126195544

执行压测参数示例:

recordcount=1000

operationcount=800

workload=site.ycsb.workloads.CoreWorkload

readallfields=true

readproportion=0.5

updateproportion=0.5

scanproportion=0

insertproportion=0

readmodifywriteproportion=0.5

requestdistribution=zipfian

fieldcount=50

fieldlength=12

insertstart0=1

mongodb.upsert=true

mongodb.url=mongodb://admin:XXX@127.0.0.1:37017/test?authSource=admin

mongodb.database=test

table=test003

threadcount: 1

本人亲测的总结:

若想重复执行脚本,避免报 _id 重复的问题,需要添加参数mongodb.upsert=true;

若需要提高性能,但是受限于机器的核数,threadcount: 8;

若需要测试更新事件,则 updateproportion 的值比 insertproportion 大,

发现这两个值,谁的值大就执行谁的操作;

若要指定每秒写入的数据量,则执行命令时在最后添加 参数 -target 2000

则 表示每秒最多执行1000个操作,当一秒内到达这个阈值,线程就会休眠1毫秒 。

示例:..././bin/ycsb load mongodb -P 1-workload -target 2000

相关推荐
余槐i5 小时前
PostgreSQL 函数索引报错 must be immutable:3种绕法与代价
数据库·后端·sql·postgresql·性能优化
数据库小学妹5 小时前
PostgreSQL表膨胀怎么办?autovacuum清不动的根因与排查命令
数据库·postgresql·表膨胀·mvcc·数据库运维
mister_guo5 小时前
MySQL-1267错误:排序规则冲突的原因与解决方案
数据库·mysql
骇客野人6 小时前
在麒麟操作系统上 分别安装 jdk1.8, 达梦数据库,redis ,memcache 的操作实施方案和步骤
数据库·redis·memcached
美狐美颜SDK开放平台7 小时前
直播APP如何实现美白滤镜功能?视频美颜SDK技术开发方案详解
前端·数据库·人工智能·音视频·美颜sdk·直播美颜sdk·视频美颜sdk
花间相见9 小时前
【计算基础|MySQL01】【上手】安装连接、数据类型与建库建表
数据库·后端
花间相见9 小时前
【计算基础|MySQL02】【上手】SQL 增删改查
数据库·后端
ITxiaobing20239 小时前
IP 库与 AppsFlyer 国家/地区数据不一致,如何系统地对账?
数据库·网络协议·tcp/ip
这个DBA有点耶9 小时前
从时间到语义:时序数据库与向量数据库的核心机制、选型与多模融合趋势
数据库·mysql·架构
对空六课9 小时前
RFM分层边界变化的回溯计算
大数据·服务器·前端·数据库·人工智能·算法·数据分析