影响Mongodb数据写入性能的因素

学习mongodb,体会mongodb的每一个使用细节,欢迎阅读威赞的文章。这是威赞发布的第83篇mongodb技术文章,欢迎浏览本专栏威赞发布的其他文章。如果您认为我的文章对您有帮助或者解决您的问题,欢迎在文章下面点个赞,或者关注威赞。谢谢。

本文结合Mongodb的官方文档,探讨影响Mongodb写入操作的几个因素。

索引对写入操作的影响

建立在集合中的每一个索引,都会为Mongodb的写入操作带来额外的开销。每一个插入或者删除操作,Mongodb也会对应的添加或删除索引中的记录。update操作,当更新带有索引的字段时,会引起索引的更新。当然,无论是插入删除还是数据更新,mongodb只会更新少量收到影响的索引,不会将整个索引重建。

通常来讲,与查询上带来的性能优化相比,牺牲数据修改时带来的性能损耗,是值得的。但是,在创建索引时也要慎重的考虑和评估对数据更新造成的影响。同时也要保证这些索引是在使用中的。

存储性能

硬件存储性能对数据插入的影响

硬件存储的性能对mongodb数据插入更新的性能有非常重要的影响。存储系统的各种因素都会对mongodb的数据写入产生影响,包括随机访问模式,磁盘缓存,磁盘预读取和RAID配置等。固态硬盘能够带来100倍以上的性能提升。

日志对数据写入的影响

Mongodb为了提供系统崩溃期间的容错机制,使用了一种在磁盘上预写日志的方法。数据变更时,Mongodb首先将内存中的数据变更写入日志文件当中。如果mongodb停止运行,或者在写入数据文件前发生错误,Mongodb就可以使用日志文件中记录下来的变更记录,将数据写入到数据文件当中。

使用预写日志的容错方案通常增加额外写操作的性能成本,因此需要考虑日志与Mongodb性能之间的相互影响:

  • 如果日志文件和数据文件在磁盘的同一个区域,数据文件读写和日志文件读写会对磁盘IO产生竞争。Mongodb官方建议将日志文件和数据文件放在不同的存储空间。
  • 当应用设定数据写入策略带有日志写入选项时,Mongodb会减少写入日志的间隔时间,增加整体的数据写入负载。
  • 用户通过参数commitIntervalMs指定日志写入的间隔时间。减少间隔时间,会增加日志写入的次数,降低Mongodb数据写入的性能。增加间隔时间,会减少日志写入次数 。但会增加出错时数据丢失的风险。
相关推荐
YMatrix 官方技术社区39 分钟前
YMatrix 存储引擎解密:MARS3 存储引擎如何超越传统行存、列存实现“时序+分析“场景性能大幅提升?
开发语言·数据库·时序数据库·数据库架构·智慧工厂·存储引擎·ymatrix
辞砚技术录1 小时前
MySQL面试题——索引2nd
数据库·mysql·面试
linweidong2 小时前
C++thread pool(线程池)设计应关注哪些扩展性问题?
java·数据库·c++
欧亚学术3 小时前
突发!刚刚新增17本期刊被剔除!
数据库·论文·sci·期刊·博士·scopus·发表
黑白极客3 小时前
怎么给字符串字段加索引?日志系统 一条更新语句是怎么执行的
java·数据库·sql·mysql·引擎
大厂技术总监下海3 小时前
数据湖加速、实时数仓、统一查询层:Apache Doris 如何成为现代数据架构的“高性能中枢”?
大数据·数据库·算法·apache
LeenixP4 小时前
RK3576-Debian12删除userdata分区
linux·运维·服务器·数据库·debian·开发板
知行合一。。。4 小时前
Python--03--函数入门
android·数据库·python
X***07884 小时前
理解 MySQL 的索引设计逻辑:从数据结构到实际查询性能的系统分析
数据库·mysql·sqlite
爬山算法4 小时前
Hibernate(31)Hibernate的原生SQL查询是什么?
数据库·sql·hibernate