使用进程组信号解决程序中断问题
在多进程处理中,有时需要通过发送信号来终止父进程。然而,如果子进程仍在运行,常规的信号发送方式可能无法将其一起终止。要解决此问题,需要使用进程组信号。
进程组
进程组是指父进程及其所有子进程的集合。向进程组发送信号时,信号会传递给组中的所有进程。要获取进程组id,可以使用 os.getpgid 函数。
修改代码
修改后的 a.py 文件:
import multiprocessing import os import signal import time def process1(): while true: print("子进程运行中") time.sleep(1) if __name__ == "__main__": a = multiprocessing.process(target=process1) a.daemon = true a.start() child_pid = a.pid parent_pid = os.getpid() # 获取并存储进程组id parent_pid_group = os.getpgid(parent_pid) # 在创建子进程后注册信号处理函数 signal.signal(signal.sigterm, handle_signal) with open("crawler.pid", "w") as f: f.write(str(parent_pid_group)) a.join() print("父进程pid:", parent_pid) print("子进程pid:", child_pid)
修改后的 b.py 文件:
import os import signal with open("crawler.pid", "r") as f: try: pid = int(f.read()) os.killpg(pid, signal.SIGTERM) print("Signal sent successfully to process", pid) except Exception as e: print("Error sending signal:", e)
在修改后的代码中,我们首先获取进程组id并将其存储在变量 parent_pid_group 中。然后,我们将在创建子进程后注册信号处理函数。最后,我们在 b.py 文件中使用 os.killpg 发送信号给进程组,而不是单独的子进程。
这些修改确保当向父进程发送信号时,信号也会传递给子进程,从而实现同时终止父进程和子进程的目的。
使用 Asyncio 进行异步编程
掌握数据争吵:开发人员的简单指南
如何用Python计算已知三边长的三角形面积?
Python调用JS函数时出现UnicodeEncodeError:如何解决编码问题?
在使用Python和Selenium进行网页爬虫时,多线程并发执行偶尔报错而单线程却没有问题,这种现象通常是由以下几个原因导致的:浏览器实例共享问题: Selenium在多线程环境下,如果多个线程试图同时操作同一个浏览器实例,可能会导致冲突。每个线程应该使用独立的浏览器实例,但如果没有正确管理,可能会出现浏览器实例被多个线程共享的情况,从而引发异常。解决方案:确保每个线程都有自己的浏览器实例。例如,可以在每个线程中创建和管理自己的浏览器实例。from selenium import webdriver i
Pydantic BaseModel默认值:列表共享的坑与解决方法