mongodb 按条件进行备份和恢复

在宝塔面板环境下,可以在定时任务设置备份mongodb
但是存在缺陷,mongodb如果存储日志,一定时间后会特别巨大,全量备份会导致服务器卡死并很快耗尽磁盘空间,按一定的条件对进行,按天备份数据是必须的。我们用过自己编写shell脚本来实现。

复制代码
sudo -u root #!/bin/bash
now=$(date +%Y-%m-%d)
#yesterday=2024-05-15
yesterday=$(date -d "yesterday" +"%Y-%m-%d")
whereday="{\"day\":\"$yesterday\"}"
dir=/www/backup/database/mongodb/table_day_backup/$yesterday
if [ ! -d "$dir" ]; then
    mkdir -p $dir
fi
cd $dir

echo "当前日期是: $whereday -> "
source  /www/backup/database/mongodb/.env

mongodump --host $MONGO_DB_HOST --port $MONGO_DB_PORT \
          --username $MONGO_DB_USERNAME --password $MONGO_DB_PASSWORD \
          --db ad_db --collection  production_websocket_client_logs \
          --query  $whereday \
          --out  $dir 
zip -r $yesterday'.zip'  ./* 

首先在.env文件里面指定mongdb的链接信息

--db ad_db 指定备份的数据库

--collection websocket_client 指定备份发集合

--query $whereday 这里指定筛选数据的条件是 按天

--out $dir 指定备份文件输出的目录

这样我们就实现了对库下的一个集合,按天进行备份。

如果某一天数据丢失需要进行还原

复制代码
sudo -u root #!/bin/bash

source  /www/backup/database/mongodb/.env
day=2024-05-15
dir=/www/backup/database/mongodb/table_day_backup/$day/audi/production_websocket_client_logs.bson
echo $dir

mongorestore  --host $MONGO_DB_HOST --port $MONGO_DB_PORT \
              --username $MONGO_DB_USERNAME --password $MONGO_DB_PASSWORD \
              --db ad_db --collection  back_websocket_client $dir 
相关推荐
不羁。。7 小时前
【撸靶笔记】第八关:GET - Blind - Boolian Based - Single Quotes
数据库·sql·mybatis
AwhiteV8 小时前
利用图数据库高效解决 Text2sql 任务中表结构复杂时占用过多大模型上下文的问题
数据库·人工智能·自然语言处理·oracle·大模型·text2sql
m0_595199858 小时前
Redis(以Django为例,含具体操作步骤)
数据库·redis·缓存
爱尚你19939 小时前
MySQL 三大日志:redo log、undo log、binlog 详解
数据库·mysql
小猿姐10 小时前
KubeBlocks AI:AI时代的云原生数据库运维探索
数据库·人工智能·云原生·kubeblocks
NocoBase11 小时前
10 个开源工具,快速构建数据应用
数据库·低代码·开源
麻辣清汤12 小时前
结合BI多维度异常分析(日期-> 商家/渠道->日期(商家/渠道))
数据库·python·sql·finebi
Kan先生13 小时前
对象存储解决方案:MinIO 的架构与代码实战
数据库·python
超级迅猛龙14 小时前
保姆级Debezium抽取SQL Server同步kafka
数据库·hadoop·mysql·sqlserver·kafka·linq·cdc
杨过过儿14 小时前
【Task02】:四步构建简单rag(第一章3节)
android·java·数据库