影响Mongodb数据写入性能的因素

学习mongodb,体会mongodb的每一个使用细节,欢迎阅读威赞的文章。这是威赞发布的第83篇mongodb技术文章,欢迎浏览本专栏威赞发布的其他文章。如果您认为我的文章对您有帮助或者解决您的问题,欢迎在文章下面点个赞,或者关注威赞。谢谢。

本文结合Mongodb的官方文档,探讨影响Mongodb写入操作的几个因素。

索引对写入操作的影响

建立在集合中的每一个索引,都会为Mongodb的写入操作带来额外的开销。每一个插入或者删除操作,Mongodb也会对应的添加或删除索引中的记录。update操作,当更新带有索引的字段时,会引起索引的更新。当然,无论是插入删除还是数据更新,mongodb只会更新少量收到影响的索引,不会将整个索引重建。

通常来讲,与查询上带来的性能优化相比,牺牲数据修改时带来的性能损耗,是值得的。但是,在创建索引时也要慎重的考虑和评估对数据更新造成的影响。同时也要保证这些索引是在使用中的。

存储性能

硬件存储性能对数据插入的影响

硬件存储的性能对mongodb数据插入更新的性能有非常重要的影响。存储系统的各种因素都会对mongodb的数据写入产生影响,包括随机访问模式,磁盘缓存,磁盘预读取和RAID配置等。固态硬盘能够带来100倍以上的性能提升。

日志对数据写入的影响

Mongodb为了提供系统崩溃期间的容错机制,使用了一种在磁盘上预写日志的方法。数据变更时,Mongodb首先将内存中的数据变更写入日志文件当中。如果mongodb停止运行,或者在写入数据文件前发生错误,Mongodb就可以使用日志文件中记录下来的变更记录,将数据写入到数据文件当中。

使用预写日志的容错方案通常增加额外写操作的性能成本,因此需要考虑日志与Mongodb性能之间的相互影响:

  • 如果日志文件和数据文件在磁盘的同一个区域,数据文件读写和日志文件读写会对磁盘IO产生竞争。Mongodb官方建议将日志文件和数据文件放在不同的存储空间。
  • 当应用设定数据写入策略带有日志写入选项时,Mongodb会减少写入日志的间隔时间,增加整体的数据写入负载。
  • 用户通过参数commitIntervalMs指定日志写入的间隔时间。减少间隔时间,会增加日志写入的次数,降低Mongodb数据写入的性能。增加间隔时间,会减少日志写入次数 。但会增加出错时数据丢失的风险。
相关推荐
立志成为大牛的小牛16 分钟前
数据结构——二十九、图的广度优先遍历(BFS)(王道408)
数据结构·数据库·学习·程序人生·考研·算法·宽度优先
爬山算法20 分钟前
Redis(78) 如何设置Redis的缓存失效策略?
数据库·redis·缓存
低音钢琴1 小时前
【SpringBoot从初学者到专家的成长20】SpringBoot集成MongoDB:非关系型数据库的探索
spring boot·mongodb·nosql
DemonAvenger1 小时前
深入Redis String:从基础到实战,10年经验的后端工程师带你解锁最佳实践
数据库·redis·性能优化
shuair1 小时前
redis大key问题
数据库·redis·缓存
SelectDB1 小时前
Apache Doris 4.0 版本正式发布:全面升级 AI 与搜索能力,强化离线计算
数据库·数据分析·apache
SelectDB2 小时前
从 Snowflake 到 Apache Doris:Planet 实时分析成本直降 80%、查询加速 90 倍
数据库·数据分析·apache
TDengine (老段)2 小时前
TDengine 数学函数 LOG 用户手册
java·大数据·数据库·时序数据库·iot·tdengine·涛思数据
TDengine (老段)2 小时前
TDengine 数据函数 MOD 用户手册
大数据·数据库·物联网·时序数据库·tdengine·涛思数据
文档搬运工2 小时前
Oracle 19.29
数据库·oracle