python定时删除指定索引

脚本

python 复制代码
import logging
from datetime import datetime, timedelta
from elasticsearch import Elasticsearch

# 配置日志记录
logging.basicConfig(
    filename='delete_uat_indices.log',
    level=logging.INFO,
    format='%(asctime)s - %(levelname)s - %(message)s'
)

# Elasticsearch 集群的连接信息
ELASTICSEARCH_HOST = "http://192.178.18.209:9200"  # 修改为你的 Elasticsearch 地址
USERNAME = "elastic"  # 修改为你的用户名
PASSWORD = "7F9L%mYWjWtb"  # 修改为你的密码
INDEX_PATTERN = "*uat*"  # 匹配带有 "uat" 的索引

def delete_old_indices():
    # 连接到 Elasticsearch 集群
    es = Elasticsearch([ELASTICSEARCH_HOST], basic_auth=(USERNAME, PASSWORD))
    # 检查连接是否成功
    if not es.ping():
        logging.error("无法连接到 Elasticsearch 集群")
        return

    logging.info("成功连接到 Elasticsearch 集群")
    # 计算 5 天前的日期
    five_days_ago = datetime.now() - timedelta(days=2)
    date_str = five_days_ago.strftime('%Y.%m.%d')

    # 获取所有索引(确保使用关键字参数)
    try:
        indices = es.indices.get(index="*uat*")  # 使用关键字参数
    except Exception as e:
        logging.error(f"获取索引列表失败: {e}")
        return

    # 过滤出符合条件的索引
    indices_to_delete = []
    for index_name in indices.keys():
        if not index_name.startswith(".") and "uat" in index_name:
            # 提取索引名称中的日期部分
            try:
                index_date_str = index_name.split("-")[-1]  # 假设日期在索引名称的最后部分
                index_date = datetime.strptime(index_date_str, '%Y.%m.%d')
                if index_date < five_days_ago:
                    indices_to_delete.append(index_name)
            except Exception as e:
                logging.warning(f"无法解析索引名称 {index_name} 的日期部分: {e}")

    if not indices_to_delete:
        logging.info(f"未找到符合条件的索引: 包含 'uat' 且日期为 {date_str}")
        return

    # 删除符合条件的索引
    for index in indices_to_delete:
        try:
            es.indices.delete(index=index)
            logging.info(f"成功删除索引: {index}")
        except Exception as e:
            logging.error(f"删除索引 {index} 时失败: {e}")

if __name__ == "__main__":
    delete_old_indices()

定时任务

crontab -e

#每天23点30定时删除5天前的uat环境日志

30 23 * * * /usr/local/python-3.9/bin/python3.9 /data/delete_old_indices/delete_uat_old_indices.py >/dev/null 2>&1

相关推荐
巴里巴气1 小时前
selenium基础知识 和 模拟登录selenium版本
爬虫·python·selenium·爬虫模拟登录
19891 小时前
【零基础学AI】第26讲:循环神经网络(RNN)与LSTM - 文本生成
人工智能·python·rnn·神经网络·机器学习·tensorflow·lstm
JavaEdge在掘金2 小时前
Redis 数据倾斜?别慌!从成因到解决方案,一文帮你搞定
python
ansurfen2 小时前
我的第一个AI项目:从零搭建RAG知识库的踩坑之旅
python·llm
前端付豪2 小时前
20、用 Python + API 打造终端天气预报工具(支持城市查询、天气图标、美化输出🧊
后端·python
前端付豪2 小时前
19、用 Python + OpenAI 构建一个命令行 AI 问答助手
后端·python
amazinging2 小时前
北京-4年功能测试2年空窗-报培训班学测开-第四十三天
python·学习
wgyang20163 小时前
我的第一个LangFlow工作流——复读机
python
Zhen (Evan) Wang3 小时前
(豆包)xgb.XGBRegressor 如何进行参数调优
开发语言·python
我爱一条柴ya3 小时前
【AI大模型】线性回归:经典算法的深度解析与实战指南
人工智能·python·算法·ai·ai编程