Linux(CentOS)/Windows-C++ 云备份项目(服务器热点管理模块设计)

热点管理模块:对服务器上备份的文件进行检测,那些文件长时间没有被访问,则认为是非热点文件,进行压缩节省磁盘空间

实现思路:

  1. 遍历所有文件,检测文件最后一次访问时间与当前时间的差值,这个差值大于配置文件的时间,则认为是非热点文件,进行压缩后放入压缩路径

  2. 注意删除源文件,修改数据管理模块的文件信息(压缩标志)

  3. 遍历备份文件夹,获取所有文件属性信息来判断。这样比遍历内存的backuoMap更准确。

cpp 复制代码
#pragma once
#include "backups.hpp"
#include <unistd.h>
extern CloudBackups::DataMange *dataMange;
namespace CloudBackups
{
    class HotMange
    {
    private:
        std::string back_dir;
        std::string pack_dir;
        std::string pack_suffix;
        int hot_time;
        // 热点文件返回true
        bool HotJudge(const std::string &filename)
        {
            FileUtil file(filename);
            if (file.isExit() == false)
            {
                LOG(FATAL, "error!");
                return false;
            }
            time_t last = file.last_visit_time();
            time_t now = time(nullptr);
            if (now - last > hot_time)
            {
                return true;
            }
            return false;
        }

    public:
        HotMange()
        {
            Config *config = Config::GetInstance();
            back_dir = config->GetBackDir();
            pack_dir = config->GetPackfileDir();
            pack_suffix = config->GetPackfileSuffix();
            hot_time = config->GetHotTime();
            // 目录不存在则创建
            FileUtil pack(pack_dir);
            if (pack.isExit() == false)
            {
                pack.mkdir();
            }
            FileUtil back(back_dir);
            if (back.isExit() == false)
            {
                back.mkdir();
            }
        }
        bool RunModule()
        {
            while (true)
            {
                // 遍历备份目录
                FileUtil file(back_dir);
                std::vector<std::string> array;
                file.ls(array);
                // 判断文件是否是热点文件
                for (auto &item : array)
                {
                    // 热点文件不处理
                    if (HotJudge(item) == true)
                    {
                        continue;
                    }
                    // 对非热点文件进行压缩
                    FileUtil compress(item);
                    // 获取文件备份信息
                    BackupInfo backupInfo;
                    if (dataMange->GetByRealPath(item, backupInfo) == false)
                    {
                        // 文件存在,无备份信息,漏记录
                        backupInfo.InitBackupInfo(item);
                        dataMange->Insert(backupInfo);
                    }
                    compress.zip(backupInfo.pack_path);
                    //  删除源文件
                    compress.removeFile();
                    //  修改备份信息
                    backupInfo.packflag = true;
                    dataMange->UpDate(backupInfo);
                }
                usleep(1000); // 避免空目录循环遍历,消耗资源
            }
            return true;
        }
    };
}
相关推荐
linweidong3 小时前
C++ 模块化编程(Modules)在大规模系统中的实践难点?
linux·前端·c++
invicinble8 小时前
对linux形成认识
linux·运维·服务器
小Pawn爷8 小时前
14.VMmare安装ubuntu
linux·运维·ubuntu
技术路上的探险家8 小时前
8 卡 V100 服务器:基于 vLLM 的 Qwen 大模型高效部署实战
运维·服务器·语言模型
半桔8 小时前
【IO多路转接】高并发服务器实战:Reactor 框架与 Epoll 机制的封装与设计逻辑
linux·运维·服务器·c++·io
绵绵细雨中的乡音8 小时前
深入理解 ET 与 LT 模式及其在 Reactor 模型中的应用
服务器·网络·php
HABuo9 小时前
【linux文件系统】磁盘结构&文件系统详谈
linux·运维·服务器·c语言·c++·ubuntu·centos
Howrun7779 小时前
关于Linux服务器的协作问题
linux·运维·服务器
小白同学_C10 小时前
Lab3-page tables && MIT6.1810操作系统工程【持续更新】
linux·c/c++·操作系统os
十年磨一剑~11 小时前
Linux程序接收到sigpipe信号崩溃处理
linux