Python守护进程模式：自动模块重载实现

185 浏览量更新于2024-08-30 收藏 61KB PDF 举报

在Python开发过程中，特别是在构建后台服务应用时，经常遇到的问题是每次修改代码后都需要重启服务才能使新更改生效，这无疑增加了开发效率的瓶颈。为了简化这个过程，许多开源Web框架如Django和Flask提供了自动模块加载（autoreload）功能，通过子进程和守护进程机制实现代码改动后的实时刷新。 **守护进程模式：** 自动模块加载的核心原理是通过创建子进程并将其置于一个守护进程（daemon）的角色。守护进程通常在后台运行且不会因为主进程的退出而结束。在autoreload.py脚本中，主进程作为守护进程，负责监控子进程的状态。子进程中运行一个单独的线程，持续检测指定的模块文件（由sys.modules中的模块的__file__属性获取）是否有变化。当检测到文件被修改时，子进程会退出，并向主进程发送一个特定的退出码（通常是3，可以根据需求自定义）。 **代码实现：** autoreload.py脚本中，关键部分包括以下函数： 1. **iter_module_files()**: 这个函数遍历sys.modules中的所有模块，找出.py或.pyo、.pyc文件，返回文件路径列表。目的是监控这些核心模块文件的变化。 2. **is_any_file_changed(mtimes)**: 这个函数用于比较文件的修改时间。它接收一个字典mtimes，用于存储上次检查时每个文件的mtime（最后修改时间）。遍历iter_module_files()返回的文件列表，对每个文件检查是否被修改。如果文件存在并且mtime大于旧时间，返回True，表示有文件已被改变；否则返回False。 3. **start_change_detector()**: 主要的监控循环函数，持续检查文件是否被修改。如果没有文件变化，就进入休眠状态；一旦检测到变化，调用sys.exit(3)来让子进程退出，并通知主进程启动新的子进程。通过这种方式，当用户在开发环境中修改代码并保存时，autoreload模块会自动检测并重新加载相应的模块，无需手动重启服务，从而提高了开发效率。这种守护进程模式在诸如web框架的实时测试、开发环境配置和调试等场景中非常有用，减少了代码迭代和调试过程中的等待时间。

Python自动重新加载模块详解自动重新加载模块详解(autoreload module)

守护进程模式守护进程模式

使用python开发后台服务程序的时候，每次修改代码之后都需要重启服务才能生效比较麻烦。

看了一下Python开源的Web框架（Django、Flask等）都有自己的自动加载模块功能（autoreload.py），都是通过subprocess

模式创建子进程，主进程作为守护进程，子进程中一个线程负责检测文件是否发生变化，如果发生变化则退出，主进程检查子

进程的退出码（exist code）如果与约定的退出码一致，则重新启动一个子进程继续工作。

自动重新加载模块代码如下：

autoreload.py

#!/usr/bin/env python

# -*- coding: utf-8 -*-

"""This module is used to test how to reload the modules automatically when any

changes is detected.

"""

__author__="Wenjun Xiao"

import os,sys,time,subprocess,thread

def iter_module_files():

for module in sys.modules.values():

filename = getattr(module, '__file__', None)

if filename:

if filename[-4:] in ('.pyo', '.pyc'):

filename = filename[:-1] yield filename

def is_any_file_changed(mtimes):

for filename in iter_module_files():

try:

mtime = os.stat(filename).st_mtime

except IOError:

continue

old_time = mtimes.get(filename, None)

if old_time is None:

mtimes[filename] = mtime

elif mtime > old_time:

return 1

return 0

def start_change_detector():

mtimes = {}

while 1:

if is_any_file_changed(mtimes):

sys.exit(3)

time.sleep(1)

def restart_with_reloader():

while 1:

args = [sys.executable] + sys.argv

new_env = os.environ.copy()

new_env['RUN_FLAG'] = 'true'

exit_code = subprocess.call(args, env=new_env)

if exit_code != 3:

return exit_code

def run_with_reloader(runner):

if os.environ.get('RUN_FLAG') == 'true':

thread.start_new_thread(runner, ())

try:

start_change_detector()

except KeyboardInterrupt:

pass

else:

try:

sys.exit(restart_with_reloader())

下载后可阅读完整内容，剩余3页未读，立即下载

weixin_38722721

粉丝: 5

Python守护进程模式：自动模块重载实现

更新修改后的Python模块方法

python-autoreload:python应用程序的自动重新加载模块

pyautoreload:python重新加载模块

autoreload

autoreload.check_errors(django.setup)()

vscode 的pythonAI工具

AutoImport

vscode ipython interactive

pycharm如何使用jupyter

最新资源