python多线程管理

20240728

引言

采用多线程来管理多个不同的任务是一种有效是任务并行化的手段。但是不同的任务在执行的过程中,线程的相关信息管理就成了问题。例如,python的多线程库并没有实现终止的命令,那么就必须自己来实现。

而且,有时候也需要对线程主动的关闭和启动,这时候就有必要在线程结束之后进行一些资源的回收,例如关闭文件,关闭套接字等。

实现方法

根据上述需求,主要参考了两篇文章12,形成相关的封装类,代码如下:

python 复制代码
from threading import Thread, Event
from abc import abstractmethod
import traceback
from loguru import logger

class Worker(Thread):

    def __init__(self, name) -> None:
        Thread.__init__(self, daemon=True)
        self.name = name

        self._event = Event()
        self.exit_code = None
        self.exception = None
        self.exc_traceback = ''

    def stop(self):
        self._event.set()

    @abstractmethod
    def _run(self):
        raise NotImplementedError

    def run(self):
        try:
            self._run()
        except Exception as e:
            logger.exception("Error on Worker level")
            self.exception = e
            self.exit_code = 1
            self.exc_traceback = traceback.format_exc()
        else:
            self.exit_code = 0

在自己继承的实际工作类中,可以通过持续轮训_event是否是设置变量来检查是否需要停止先成功,然后关闭相关的资源。

参考

1Python多线程捕获子线程的异常,并退出主进程。

2python多线程编程:如何优雅地关闭线程

相关推荐
lv__pf1 小时前
09-深入理解AQS之独占锁ReentrantLock源码分析【TL 并发 09】
java·开发语言
小兔崽子去哪了1 小时前
深度学习 2 / CNN 神经网络
后端·python
weixin_440730502 小时前
队列QUEUE介绍+类型示例(先进先出、后进先出、优先级高先出、双端进入、生产者+消费者线程)
python·线程·queue
这是程序猿2 小时前
Java线程池深度剖析:源码原理、核心参数、任务调度与生产调优实战
java·开发语言·python
Web3&Basketball2 小时前
ChatGPT 路由自证:跨客户端实测对照
python·大模型·agent·推理·推理优化
Patrick在香港2 小时前
Claude 工作提醒自动化:香港天文台四个接口三个「更新时间」,警告到期了却还在生效
python·api·claude·数据抓取·香港
用户8356290780512 小时前
Python 实现 Word 文档域的插入与管理
后端·python
quantdash_cc2 小时前
从数据采集到策略消费,股票日内行情管道应该怎么设计?
开发语言·python·数据分析·量化交易·股票数据·quantdash
郝学胜-神的一滴2 小时前
C++20模板元编程 01:从零吃透模板核心底层逻辑
开发语言·c++·vscode·程序人生·开源
程序员杰哥2 小时前
UI自动化测试:Jenkins配置
自动化测试·软件测试·python·测试工具·职场和发展·jenkins·测试用例