影响Mongodb数据写入性能的因素

学习mongodb,体会mongodb的每一个使用细节,欢迎阅读威赞的文章。这是威赞发布的第83篇mongodb技术文章,欢迎浏览本专栏威赞发布的其他文章。如果您认为我的文章对您有帮助或者解决您的问题,欢迎在文章下面点个赞,或者关注威赞。谢谢。

本文结合Mongodb的官方文档,探讨影响Mongodb写入操作的几个因素。

索引对写入操作的影响

建立在集合中的每一个索引,都会为Mongodb的写入操作带来额外的开销。每一个插入或者删除操作,Mongodb也会对应的添加或删除索引中的记录。update操作,当更新带有索引的字段时,会引起索引的更新。当然,无论是插入删除还是数据更新,mongodb只会更新少量收到影响的索引,不会将整个索引重建。

通常来讲,与查询上带来的性能优化相比,牺牲数据修改时带来的性能损耗,是值得的。但是,在创建索引时也要慎重的考虑和评估对数据更新造成的影响。同时也要保证这些索引是在使用中的。

存储性能

硬件存储性能对数据插入的影响

硬件存储的性能对mongodb数据插入更新的性能有非常重要的影响。存储系统的各种因素都会对mongodb的数据写入产生影响,包括随机访问模式,磁盘缓存,磁盘预读取和RAID配置等。固态硬盘能够带来100倍以上的性能提升。

日志对数据写入的影响

Mongodb为了提供系统崩溃期间的容错机制,使用了一种在磁盘上预写日志的方法。数据变更时,Mongodb首先将内存中的数据变更写入日志文件当中。如果mongodb停止运行,或者在写入数据文件前发生错误,Mongodb就可以使用日志文件中记录下来的变更记录,将数据写入到数据文件当中。

使用预写日志的容错方案通常增加额外写操作的性能成本,因此需要考虑日志与Mongodb性能之间的相互影响:

  • 如果日志文件和数据文件在磁盘的同一个区域,数据文件读写和日志文件读写会对磁盘IO产生竞争。Mongodb官方建议将日志文件和数据文件放在不同的存储空间。
  • 当应用设定数据写入策略带有日志写入选项时,Mongodb会减少写入日志的间隔时间,增加整体的数据写入负载。
  • 用户通过参数commitIntervalMs指定日志写入的间隔时间。减少间隔时间,会增加日志写入的次数,降低Mongodb数据写入的性能。增加间隔时间,会减少日志写入次数 。但会增加出错时数据丢失的风险。
相关推荐
AAA修煤气灶刘哥7 小时前
后端人速藏!数据库PD建模避坑指南
数据库·后端·mysql
RestCloud11 小时前
揭秘 CDC 技术:让数据库同步快人一步
数据库·api
得物技术14 小时前
MySQL单表为何别超2000万行?揭秘B+树与16KB页的生死博弈|得物技术
数据库·后端·mysql
可涵不会debug18 小时前
【IoTDB】时序数据库选型指南:工业大数据场景下的技术突围
数据库·时序数据库
ByteBlossom18 小时前
MySQL 面试场景题之如何处理 BLOB 和CLOB 数据类型?
数据库·mysql·面试
麦兜*18 小时前
MongoDB Atlas 云数据库实战:从零搭建全球多节点集群
java·数据库·spring boot·mongodb·spring·spring cloud
Slaughter信仰18 小时前
深入理解Java虚拟机:JVM高级特性与最佳实践(第3版)第十章知识点问答(10题)
java·jvm·数据库
麦兜*18 小时前
MongoDB 在物联网(IoT)中的应用:海量时序数据处理方案
java·数据库·spring boot·物联网·mongodb·spring
-Xie-19 小时前
Mysql杂志(十六)——缓存池
数据库·mysql·缓存