mongodb 性能优化

  • 连接池: 主要是mongoDB文件最大打开句柄数数既连接池最大数修改

mongoDB属于内存型非关系型数据库,既所有操作都在内存中执行,当内存无法存放时才会放到磁盘中去操作,所以mongoDB的服务器一般是大内存+SSD的配置。但就性能方面而言,当超过内存值去使用磁盘来做操作时,性能至少会降低为原来性能的1/3。所以在实际的使用和测试过程中需要尽量避免让mongo使用到磁盘。

调优:

mongoDB是使用文档方式存储的,而取决于mongoDB的连接池数量也是这个open files的值,mongoDB的机制是open files*80% + 16 = 允许最大连接数。

open files默认值是1024,既默认的最大连接数是800多,这在性能测试中非常影响测试,所以需要进行修改。

使用ulimit可以概览当前的一些默认配置:

ulimit -a

使用 ulimit -n  则可以直接查看open files的值

修改该值的方法有两种

第一种:

直接使用: ulimit -n 65535

该方法修改的最大文件打开数仅针对当前的session有效,当前用户退出后重新登录则会失效。如果当前用户设置后重启mongoDB服务器则会永久生效。

第二种修改方式:

vim /etc/security/limits.conf

  • soft nofile 65535

  • hard nofile 65535

修改配置文件后并不会立即生效,需要在新生成的session中才会生效,当前session并不会生效。可以先退出再登陆mongo服务器即可生效。

以上修改后完成以后需要在mongoDB中验证

./mongo --username xxx --password xxx --port xxx --authenticationDatabase xxx db.serverStatus().connections

可以看到可用时5.2W+ 说明已经生效

以上就是mongoDB连接池和最大打开文件数的修改

相关推荐
张璐月2 小时前
mysql join语句、全表扫描 执行优化与访问冷数据对内存命中率的影响
数据库·mysql
全干engineer4 小时前
ClickHouse 入门详解:它到底是什么、优缺点、和主流数据库对比、适合哪些场景?
数据库·clickhouse
Hellyc6 小时前
基于模板设计模式开发优惠券推送功能以及对过期优惠卷进行定时清理
java·数据库·设计模式·rocketmq
lifallen6 小时前
Paimon LSM Tree Compaction 策略
java·大数据·数据结构·数据库·算法·lsm-tree
{⌐■_■}10 小时前
【Kafka】登录日志处理的三次阶梯式优化实践:从同步写入到Kafka多分区批处理
数据库·分布式·mysql·kafka·go
isNotNullX10 小时前
数据中台架构解析:湖仓一体的实战设计
java·大数据·数据库·架构·spark
睿思达DBA_WGX13 小时前
由 DB_FILES 参数导致的 dg 服务器无法同步问题
运维·数据库·oracle
袋鼠云数栈14 小时前
使用自然语言体验对话式MySQL数据库运维
大数据·运维·数据库·后端·mysql·ai·数据治理·数栈·data+ai
阿里云大数据AI技术14 小时前
数据 + 模型 驱动 AI Native 应用发展
大数据·数据库·人工智能