mongodb 性能优化

  • 连接池: 主要是mongoDB文件最大打开句柄数数既连接池最大数修改

mongoDB属于内存型非关系型数据库,既所有操作都在内存中执行,当内存无法存放时才会放到磁盘中去操作,所以mongoDB的服务器一般是大内存+SSD的配置。但就性能方面而言,当超过内存值去使用磁盘来做操作时,性能至少会降低为原来性能的1/3。所以在实际的使用和测试过程中需要尽量避免让mongo使用到磁盘。

调优:

  mongoDB是使用文档方式存储的,而取决于mongoDB的连接池数量也是这个open files的值,mongoDB的机制是open files*80% + 16 = 允许最大连接数。

  open files默认值是1024,既默认的最大连接数是800多,这在性能测试中非常影响测试,所以需要进行修改。

  使用ulimit可以概览当前的一些默认配置:

ulimit -a

  使用 ulimit -n  则可以直接查看open files的值

 修改该值的方法有两种

第一种:

直接使用: ulimit -n 65535

  该方法修改的最大文件打开数仅针对当前的session有效,当前用户退出后重新登录则会失效。如果当前用户设置后重启mongoDB服务器则会永久生效。

  第二种修改方式:

vim /etc/security/limits.conf

  • soft nofile 65535

  • hard nofile 65535

  修改配置文件后并不会立即生效,需要在新生成的session中才会生效,当前session并不会生效。可以先退出再登陆mongo服务器即可生效。

以上修改后完成以后需要在mongoDB中验证

./mongo --username xxx --password xxx --port xxx --authenticationDatabase xxx db.serverStatus().connections

可以看到可用时5.2W+ 说明已经生效

以上就是mongoDB连接池和最大打开文件数的修改

相关推荐
Data_Journal22 分钟前
如何将网页抓取用于机器学习
大数据·开发语言·数据库·python·scrapy
Lyra_Infra40 分钟前
从 MySQL 到达梦:一次信创隔离环境里的数据库迁移踩坑实录
数据库·后端·mysql
数据工匠老o41 分钟前
sysbench/TPC-C/自定义脚本:数据库压测工具对比与实战流程
数据库·测试
数安3000天1 小时前
数据分类分级产品有哪四类技术路线?
大数据·数据库
泡茶喝茶写代码1 小时前
量化数据开发实战系列(第 25 篇):基金基础接口实战:基金列表、ETF-LOF 分类、基金概况、净值数据
java·数据库·人工智能·python·mysql
张小姐的猫1 小时前
【AI大模型接入SDK】 —— 数据管理 & 与Session模块进行联动
数据结构·数据库·c++·人工智能·python·chatgpt
我是唐青枫2 小时前
MongoDB 从零到能用:文档、CRUD、聚合与 Node.js 实战
mongodb
IvorySQL2 小时前
PostgreSQL 日报|大模型破解在线校验和(9 月 15 日)
数据库·人工智能·postgresql
Leon-Ning Liu3 小时前
Oracle 19c ASMB 进程 PGA 内存泄漏排查实战 (Bug 38610635)
数据库·oracle
步行cgn3 小时前
Spring 注入 null 和空字符串详解
数据库·spring·oracle