中非商贸资讯爬虫任务管理平台操作指南

"中非商贸资讯爬虫任务管理平台操作手册" 中非商贸资讯爬虫任务管理平台是一款专为优化中非商贸信息处理而设计的工具，它提供了线上脚本托管和调度的功能，旨在提升平台架构的效能，增强系统的容错能力，提高运维效率，并便于脚本的管理和维护。 **系统结构** 平台主要由登录模块、虚拟环境模块和脚本管理模块构成。登录模块允许用户通过输入正确的用户名和密码进行访问，同时支持“记住密码”功能，以便简化后续登录过程。登录后，用户可以进入“爬虫托管”界面进行各项操作，而“数据中心”功能目前处于待开发状态。 **登录** 用户通过浏览器访问平台登录页面，输入用户名、密码及相关信息，如关联脚本、启动参数、任务创建人和创建时间等。登录成功后，用户能查看和管理虚拟环境和爬虫脚本。 **虚拟环境** 1. **虚拟环境列表**：展示了所有创建的虚拟环境，包括环境名称、创建时间和安装的依赖。用户可以创建新的虚拟环境，编辑现有环境或删除不需要的环境。 2. **环境详情**：提供了虚拟环境的详细信息，如环境名称、创建时间、安装的依赖等，用户可以在此查看和管理虚拟环境。 **脚本管理** 1. **爬虫脚本列表**：列出了已添加的爬虫脚本，支持查看、编辑和删除操作。用户可以通过导航栏的“爬虫脚本”进入此页面，查看脚本的相关信息，如目标站点名称、URL、启动命令、脚本作者和备注等。 2. **新增脚本**：用户可以创建新脚本，需提供目标站点名称、URL、启动命令、脚本作者信息，并选择合适的运行环境，同时上传zip格式的脚本文件，最大32MB。 3. **脚本详情**：展示脚本的完整信息，包括所属站点、URL、运行环境、启动命令、脚本作者、脚本文件和备注，确保信息的一致性。 这个平台通过统一的管理和调度，使得中非商贸信息的抓取和处理更加高效，降低了错误率，同时为脚本开发和运维人员提供了便利的工具。