Linux(CentOS)/Windows-C++ 云备份项目(服务器热点管理模块设计)

热点管理模块:对服务器上备份的文件进行检测,那些文件长时间没有被访问,则认为是非热点文件,进行压缩节省磁盘空间

实现思路:

  1. 遍历所有文件,检测文件最后一次访问时间与当前时间的差值,这个差值大于配置文件的时间,则认为是非热点文件,进行压缩后放入压缩路径

  2. 注意删除源文件,修改数据管理模块的文件信息(压缩标志)

  3. 遍历备份文件夹,获取所有文件属性信息来判断。这样比遍历内存的backuoMap更准确。

cpp 复制代码
#pragma once
#include "backups.hpp"
#include <unistd.h>
extern CloudBackups::DataMange *dataMange;
namespace CloudBackups
{
    class HotMange
    {
    private:
        std::string back_dir;
        std::string pack_dir;
        std::string pack_suffix;
        int hot_time;
        // 热点文件返回true
        bool HotJudge(const std::string &filename)
        {
            FileUtil file(filename);
            if (file.isExit() == false)
            {
                LOG(FATAL, "error!");
                return false;
            }
            time_t last = file.last_visit_time();
            time_t now = time(nullptr);
            if (now - last > hot_time)
            {
                return true;
            }
            return false;
        }

    public:
        HotMange()
        {
            Config *config = Config::GetInstance();
            back_dir = config->GetBackDir();
            pack_dir = config->GetPackfileDir();
            pack_suffix = config->GetPackfileSuffix();
            hot_time = config->GetHotTime();
            // 目录不存在则创建
            FileUtil pack(pack_dir);
            if (pack.isExit() == false)
            {
                pack.mkdir();
            }
            FileUtil back(back_dir);
            if (back.isExit() == false)
            {
                back.mkdir();
            }
        }
        bool RunModule()
        {
            while (true)
            {
                // 遍历备份目录
                FileUtil file(back_dir);
                std::vector<std::string> array;
                file.ls(array);
                // 判断文件是否是热点文件
                for (auto &item : array)
                {
                    // 热点文件不处理
                    if (HotJudge(item) == true)
                    {
                        continue;
                    }
                    // 对非热点文件进行压缩
                    FileUtil compress(item);
                    // 获取文件备份信息
                    BackupInfo backupInfo;
                    if (dataMange->GetByRealPath(item, backupInfo) == false)
                    {
                        // 文件存在,无备份信息,漏记录
                        backupInfo.InitBackupInfo(item);
                        dataMange->Insert(backupInfo);
                    }
                    compress.zip(backupInfo.pack_path);
                    //  删除源文件
                    compress.removeFile();
                    //  修改备份信息
                    backupInfo.packflag = true;
                    dataMange->UpDate(backupInfo);
                }
                usleep(1000); // 避免空目录循环遍历,消耗资源
            }
            return true;
        }
    };
}
相关推荐
A小辣椒19 小时前
TShark:Wireshark CLI 功能
linux
A小辣椒1 天前
TShark:基础知识
linux
AlfredZhao1 天前
OCI 明明分配了 200G 系统盘,为什么 df 只看到 30G?
linux·oci
AlfredZhao2 天前
vi 删除指定范围的行,不用再反复按 dd
linux·vi
用户9718356334662 天前
银河麒麟 KY10 申威(SW64) 安装 nginx-1.16.1-2.p01.ky10.sw_64.rpm 详细步骤
linux
猪脚踏浪2 天前
linux 拷贝文件或目录到指定的位置
linux
大树883 天前
金刚石散热越强,管路越先见顶
大数据·运维·服务器·人工智能·ai
摇滚侠3 天前
Linux CentOS7 rpm 安装 MySQL 5.7
linux·运维·mysql
bush43 天前
嵌入式linux学习记录十四、术语
linux·嵌入式
载数而行5203 天前
Linux 11 动态监控指令top
linux