影响Mongodb数据写入性能的因素
学习mongodb,体会mongodb的每一个使用细节,欢迎阅读威赞的文章。这是威赞发布的第83篇mongodb技术文章,欢迎浏览本专栏威赞发布的其他文章。如果您认为我的文章对您有帮助或者解决您的问题,欢迎在文章下面点个赞,或者关注威赞。谢谢。
本文结合Mongodb的官方文档,探讨影响Mongodb写入操作的几个因素。
索引对写入操作的影响
建立在集合中的每一个索引,都会为Mongodb的写入操作带来额外的开销。每一个插入或者删除操作,Mongodb也会对应的添加或删除索引中的记录。update操作,当更新带有索引的字段时,会引起索引的更新。当然,无论是插入删除还是数据更新,mongodb只会更新少量收到影响的索引,不会将整个索引重建。
通常来讲,与查询上带来的性能优化相比,牺牲数据修改时带来的性能损耗,是值得的。但是,在创建索引时也要慎重的考虑和评估对数据更新造成的影响。同时也要保证这些索引是在使用中的。
存储性能
硬件存储性能对数据插入的影响
硬件存储的性能对mongodb数据插入更新的性能有非常重要的影响。存储系统的各种因素都会对mongodb的数据写入产生影响,包括随机访问模式,磁盘缓存,磁盘预读取和RAID配置等。固态硬盘能够带来100倍以上的性能提升。
日志对数据写入的影响
Mongodb为了提供系统崩溃期间的容错机制,使用了一种在磁盘上预写日志的方法。数据变更时,Mongodb首先将内存中的数据变更写入日志文件当中。如果mongodb停止运行,或者在写入数据文件前发生错误,Mongodb就可以使用日志文件中记录下来的变更记录,将数据写入到数据文件当中。
使用预写日志的容错方案通常增加额外写操作的性能成本,因此需要考虑日志与Mongodb性能之间的相互影响:
- 如果日志文件和数据文件在磁盘的同一个区域,数据文件读写和日志文件读写会对磁盘IO产生竞争。Mongodb官方建议将日志文件和数据文件放在不同的存储空间。
- 当应用设定数据写入策略带有日志写入选项时,Mongodb会减少写入日志的间隔时间,增加整体的数据写入负载。
- 用户通过参数commitIntervalMs指定日志写入的间隔时间。减少间隔时间,会增加日志写入的次数,降低Mongodb数据写入的性能。增加间隔时间,会减少日志写入次数 。但会增加出错时数据丢失的风险。