心 空

  • Tools
MongoDB
MongoDB

MongoDB Shard集群大批量数据导入优化

0x00 起因是需要往MongoDB的Shard分片集群导入两个T(十亿文档)级别的数据。其中遇到了各种很严重的性能问题,在这里做一下记录。 0x01 索引 在导入数据时,尽量不提前建立索引,仅建立必须的shard_key。 0x02 批量写入 在进行大批量导入时,尽量使用insert_many进行批量写入。若写入顺序不重要的话,可以设置ordered=False来提高速度。 0x03 SHARD_FILTER问题 若从一个Shard集群读取数据,并且读取的规则为Secondary Preferred,在查询时会缺…

5 9 月, 2019 5569点热度 3人点赞 Ricky 阅读全文

Ricky

这个人很懒,什么都没留下

最新 热点 随机
最新 热点 随机
如何自建Coder平台,并且添加VSCode Web Docker容器如何通过DHCP,实现自动获取宿主机局域网IP WireGuard的简单使用,以及自动Mesh相关想法 QNAP NAS:安装Emby,使用MPD配合upmpdcli实现本机DLNA播放 Raspberry Pi 4:将树莓派作为网桥使用 Raspberry Pi 4:使用bluez和bluealsa,将树莓派改造为蓝牙音箱
Python MD5,Base64加密小工具 Raspberry(树莓派) 2 B 之Kali系统开无线热点(RTL8188CUS) Linux 之 Shadowsocks + Proxychains代理 Less-4 Less-15~16 XPath注入小结

COPYRIGHT © 2025 心 空. ALL RIGHTS RESERVED.

Theme Kratos Made By Seaton Jiang

闽ICP备2025112953号

闽公网安备35020602003364号