【Python】关于python多进程

问题:

程序打包后,打开exe,软件重复启动直至电脑卡死关机。

原因:

这是一个关于Python中multiprocessing模块的问题。当在Windows系统上使用多进程时,在创建子进程时,会重新导入主模块,这可能导致无限递归创建子进程。为了避免这种情况,我们需要使用freeze_support()函数。

具体来说,当我们使用multiprocessing模块创建子进程时,子进程会导入主模块。如果主模块中没有保护措施,就会再次执行创建子进程的代码,从而导致无限循环。在Windows系统中,这个问题尤其突出,因为Windows没有fork系统调用,所以创建子进程时会重新导入主模块。

解决办法:

在主模块的入口点(即if name == 'main':块中)调用freeze_support()函数。这样可以确保当主模块被导入时,不会执行创建子进程的代码

关于multiprocessing.freeze_support()

multiprocessing.freeze_support() 是 Python 中 multiprocessing 模块的一个重要函数,主要用于支持将 Python 程序打包成独立的可执行文件。以下是它的主要作用:

  1. 主要作用

    支持程序打包(如 PyInstaller、py2exe)

    当使用 PyInstaller、py2exe、cx_Freeze 等工具将 Python 程序打包成独立的可执行文件时

    在多进程环境下,子进程需要重新导入主模块

    freeze_support() 确保在多进程环境中正确初始化

  2. 防止 Windows 上的运行时错误

    在 Windows 系统中,使用 multiprocessing 模块时

    如果不调用 freeze_support(),可能会出现 RuntimeError

    Windows 没有 fork 系统调用,所以需要特殊的处理来启动子进程

  3. 使用场景

基本用法

bash 复制代码
import multiprocessing

def worker():
    print("Worker process")

if __name__ == '__main__':
    # 必须在使用 multiprocessing 之前调用
    multiprocessing.freeze_support()
    
    # 创建和启动进程
    p = multiprocessing.Process(target=worker)
    p.start()
    p.join()

在打包的应用中

bash 复制代码
import multiprocessing
import sys

def main():
    # 主程序逻辑
    print("Main process")

if __name__ == '__main__':
    # 检查是否被冻结(打包成exe)
    if getattr(sys, 'frozen', False):
        multiprocessing.freeze_support()
    
    main()

注意事项

  • 位置重要
bash 复制代码
# 正确:在 if __name__ == '__main__': 块中调用
if __name__ == '__main__':
    multiprocessing.freeze_support()
    # 其他代码


# 错误:不要在模块级别调用
# multiprocessing.freeze_support()  # 不要这样写!
  • 平台特定

    主要针对 Windows 系统

    在 Linux/macOS 上通常不需要,但有它也不会出错

    建议总是包含以保持跨平台兼容性

  • 与打包工具配合

bash 复制代码
# PyInstaller 等工具会自动处理
# 但显式调用 freeze_support() 是良好的实践

如果不使用的后果

当程序被打包成 exe 且不使用 freeze_support() 时:

  • Windows 上可能会抛出 RuntimeError
  • 子进程可能无法正确启动
  • 程序可能崩溃或行为异常
相关推荐
喵手2 小时前
Python爬虫零基础入门【第六章:增量、去重、断点续爬·第1节】增量采集:只抓新增/更新(新手也能做)!
爬虫·python·python爬虫实战·python爬虫工程化实战·python爬虫零基础入门·增量、去重·增量采集
万粉变现经纪人2 小时前
如何解决 pip install pyodbc 报错 缺少 ‘cl.exe’ 或 ‘sql.h’(ODBC 头文件)问题
数据库·python·sql·网络协议·bug·ssl·pip
dazzle2 小时前
Python数据结构(五):队列详解
数据结构·python
翱翔的苍鹰2 小时前
完整的“RNN + jieba 中文情感分析”项目之一:需要添加添加 JWT 认证
人工智能·python·rnn
0思必得02 小时前
[Web自动化] 爬虫URL去重
运维·爬虫·python·selenium·自动化
Cherry的跨界思维2 小时前
【AI测试全栈:质量】40、数据平权之路:Python+Java+Vue全栈实战偏见检测与公平性测试
java·人工智能·python·机器学习·ai测试·ai全栈·ai测试全栈
wheelmouse77882 小时前
Python 装饰器函数(decoratots) 学习笔记
笔记·python·学习
老歌老听老掉牙2 小时前
差分进化算法深度解码:Scipy高效全局优化实战秘籍
python·算法·scipy
工程师老罗2 小时前
Pycharm下新建一个conda环境后,如何在该环境下安装包?
人工智能·python