温馨提示×

温馨提示×

您好,登录后才能下订单哦!

密码登录×
登录注册×
其他方式登录
点击 登录注册 即表示同意《亿速云用户服务条款》

mongodb如何清理collection中大量数据

发布时间:2021-11-11 14:02:51 来源:亿速云 阅读:1000 作者:小新 栏目:关系型数据库

小编给大家分享一下mongodb如何清理collection中大量数据,相信大部分人都还不怎么了解,因此分享这篇文章给大家参考一下,希望大家阅读完这篇文章后大有收获,下面让我们一起去了解一下吧!

1 shell中for循环清理

每次去连接一下mongo, 进行数据的remove操作

echo "Begin ..." >> /root/time.log;
echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/time.log;

for((i=1;i<=100000000;i++)); 
do 
        objectid=`/usr/local/mongodb/bin/mongo 127.0.0.1:37017/test -uadmin -padmin --quiet --eval "printjson(db.tickets.findOne({"date":{\\$lt:ISODate(\"2013-01-10T01
:16:33.303Z\")}},{"_id":1}))"`;
         /usr/local/mongodb/bin/mongo 127.0.0.1:37017/test -uadmin -padmin --quiet --eval "db.tickets.remove($objectid)";
         echo " done " $objectid "  " >> /root/tickets.log
done
echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/time.log;
echo "End ..." >> /root/time.log;
echo " " >> /root/time.log


2 mongo shell中 for循环 清理

只连接一次mongo, 在mongo shell中for循环清理

[root@mongo ~]# more t.sh

echo "Begin ..." >> /root/t.log;
echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/t.log;


/usr/local/mongodb/bin/mongo 127.0.0.1:37017/test -uadmin -padmin t.js;


echo $(date +%Y-%m-%d-%H:%M:%S) >>/root/t.log;
echo "End ..." >> /root/t.log;
echo " " >> /root/t.log
[root@mongo ~]# 
[root@mongo ~]# 
[root@mongo ~]# more t.js
for( var i=1 ; i<=100000000; i++ ) {
        var objectid = db.tickets.findOne({date:{$lt:ISODate("2013-01-10T01:16:33.303Z")}},{_id:1}); 
        db.tickets.remove(objectid);
}


[root@mongo ~]#

实际测试, 第一种安全保险的多,但是毕竟慢,清理100G的数据 大概要3天 ,第二种快捷的多(据说有风险,但是我测试没有碰到过),清理100G的数据,用了6个小时.

以上是“mongodb如何清理collection中大量数据”这篇文章的所有内容,感谢各位的阅读!相信大家都有了一定的了解,希望分享的内容对大家有所帮助,如果还想学习更多知识,欢迎关注亿速云行业资讯频道!

向AI问一下细节

免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。

AI