Linux(CentOS)/Windows-C++ 云备份项目(服务器热点管理模块设计)

热点管理模块:对服务器上备份的文件进行检测,那些文件长时间没有被访问,则认为是非热点文件,进行压缩节省磁盘空间

实现思路:

  1. 遍历所有文件,检测文件最后一次访问时间与当前时间的差值,这个差值大于配置文件的时间,则认为是非热点文件,进行压缩后放入压缩路径

  2. 注意删除源文件,修改数据管理模块的文件信息(压缩标志)

  3. 遍历备份文件夹,获取所有文件属性信息来判断。这样比遍历内存的backuoMap更准确。

cpp 复制代码
#pragma once
#include "backups.hpp"
#include <unistd.h>
extern CloudBackups::DataMange *dataMange;
namespace CloudBackups
{
    class HotMange
    {
    private:
        std::string back_dir;
        std::string pack_dir;
        std::string pack_suffix;
        int hot_time;
        // 热点文件返回true
        bool HotJudge(const std::string &filename)
        {
            FileUtil file(filename);
            if (file.isExit() == false)
            {
                LOG(FATAL, "error!");
                return false;
            }
            time_t last = file.last_visit_time();
            time_t now = time(nullptr);
            if (now - last > hot_time)
            {
                return true;
            }
            return false;
        }

    public:
        HotMange()
        {
            Config *config = Config::GetInstance();
            back_dir = config->GetBackDir();
            pack_dir = config->GetPackfileDir();
            pack_suffix = config->GetPackfileSuffix();
            hot_time = config->GetHotTime();
            // 目录不存在则创建
            FileUtil pack(pack_dir);
            if (pack.isExit() == false)
            {
                pack.mkdir();
            }
            FileUtil back(back_dir);
            if (back.isExit() == false)
            {
                back.mkdir();
            }
        }
        bool RunModule()
        {
            while (true)
            {
                // 遍历备份目录
                FileUtil file(back_dir);
                std::vector<std::string> array;
                file.ls(array);
                // 判断文件是否是热点文件
                for (auto &item : array)
                {
                    // 热点文件不处理
                    if (HotJudge(item) == true)
                    {
                        continue;
                    }
                    // 对非热点文件进行压缩
                    FileUtil compress(item);
                    // 获取文件备份信息
                    BackupInfo backupInfo;
                    if (dataMange->GetByRealPath(item, backupInfo) == false)
                    {
                        // 文件存在,无备份信息,漏记录
                        backupInfo.InitBackupInfo(item);
                        dataMange->Insert(backupInfo);
                    }
                    compress.zip(backupInfo.pack_path);
                    //  删除源文件
                    compress.removeFile();
                    //  修改备份信息
                    backupInfo.packflag = true;
                    dataMange->UpDate(backupInfo);
                }
                usleep(1000); // 避免空目录循环遍历,消耗资源
            }
            return true;
        }
    };
}
相关推荐
慎思知行3 分钟前
Discord中创建机器人的流程
linux·服务器·机器人
enbug7 分钟前
编译安卓内核:以坚果R1、魔趣MK100(Android 10)系统为例
android·linux
玉梅小洋8 分钟前
Linux命令详解 —— IP 命令及永久配置
linux·运维·tcp/ip
yqcoder11 分钟前
uni-app 之 下拉刷新
运维·服务器·uni-app
江畔何人初12 分钟前
k8s中Role与networkpolicy区别
linux·运维·云原生
huohaiyu25 分钟前
IP协议详解
服务器·网络·tcp/ip
Madison-No743 分钟前
【Linux】一切皆文件的理解 && 缓冲区 && 简易设计libc库
linux·运维·服务器
AL31744 分钟前
模拟实现NetDevOps全生命周期自动化网络运维
运维·docker·centos·ensp·netmiko
Alaaaaaaan1 小时前
[DevOps]使用github-action工具部署docker容器(实现提交代码一键推送部署到服务器)
服务器·前端·docker·容器·github
快来吃饭�1 小时前
Ubuntu-20.04 gem5 构建并实现一个简单的配置脚本
linux·ubuntu·系统架构