mongodb 按条件进行备份和恢复

在宝塔面板环境下,可以在定时任务设置备份mongodb
但是存在缺陷,mongodb如果存储日志,一定时间后会特别巨大,全量备份会导致服务器卡死并很快耗尽磁盘空间,按一定的条件对进行,按天备份数据是必须的。我们用过自己编写shell脚本来实现。

复制代码
sudo -u root #!/bin/bash
now=$(date +%Y-%m-%d)
#yesterday=2024-05-15
yesterday=$(date -d "yesterday" +"%Y-%m-%d")
whereday="{\"day\":\"$yesterday\"}"
dir=/www/backup/database/mongodb/table_day_backup/$yesterday
if [ ! -d "$dir" ]; then
    mkdir -p $dir
fi
cd $dir

echo "当前日期是: $whereday -> "
source  /www/backup/database/mongodb/.env

mongodump --host $MONGO_DB_HOST --port $MONGO_DB_PORT \
          --username $MONGO_DB_USERNAME --password $MONGO_DB_PASSWORD \
          --db ad_db --collection  production_websocket_client_logs \
          --query  $whereday \
          --out  $dir 
zip -r $yesterday'.zip'  ./* 

首先在.env文件里面指定mongdb的链接信息

--db ad_db 指定备份的数据库

--collection websocket_client 指定备份发集合

--query $whereday 这里指定筛选数据的条件是 按天

--out $dir 指定备份文件输出的目录

这样我们就实现了对库下的一个集合,按天进行备份。

如果某一天数据丢失需要进行还原

复制代码
sudo -u root #!/bin/bash

source  /www/backup/database/mongodb/.env
day=2024-05-15
dir=/www/backup/database/mongodb/table_day_backup/$day/audi/production_websocket_client_logs.bson
echo $dir

mongorestore  --host $MONGO_DB_HOST --port $MONGO_DB_PORT \
              --username $MONGO_DB_USERNAME --password $MONGO_DB_PASSWORD \
              --db ad_db --collection  back_websocket_client $dir 
相关推荐
摇滚侠6 小时前
《On Java 中文版 基础卷》阅读笔记 实现隐藏 12
java·数据库·笔记
川石课堂软件测试6 小时前
学习软件测试需掌握的一些知识
数据库·python·sql·功能测试·网络协议·mysql·http
2501_937767167 小时前
自建 SQL 数据库定时备份踩坑复盘与落地思路
数据库·sql
silvamux_8 小时前
10款模型写种草笔记:可发布性、返工来源与成本数据缺口复盘
java·数据库·笔记
I Am a robert girl10 小时前
从 GameHorizon 拆解多时间尺度游戏评测:数据管线、离线基准与在线回放的三层设计
数据库·游戏·多时间尺度·数据管线·游戏评测·离线基准·在线回放
躺柒10 小时前
读数据安全架构设计与实践17安全架构案例(下)
数据库·安全·零信任·安全架构·防火墙·无边界
SelectDB11 小时前
实时更新排错现场:导入了却查到旧数据,和 FINAL 越加越慢的两条路
大数据·数据库·数据分析
SelectDB11 小时前
拿 Planet 的账单一行行对下来,我总结出三个可自查的校验点
大数据·数据库·数据分析
SelectDB11 小时前
Apache Doris + Vane:让多模态数据进入业务分析
大数据·数据库·数据分析
pjj1985413 小时前
ClickHouse 与 Doris 数据库技术梳理:看懂分析型数据库
数据库·clickhouse