Django开发的Distribute系统实现ansible任务分发与执行结果查询

资源摘要信息:"Distribute是一个基于Django 2.2开发的分布式任务分发系统，主要负责将ansible任务拆分并推送到Kafka消息队列中，同时支持用户通过adhoc和playbook方式下发任务，并能查询任务的执行结果。而Execute-Engine作为Distribute的执行部分，负责消费Kafka中的指令集任务，并将执行结果存储到MySQL数据库中。 本系统通过Docker容器进行部署，保证了服务的高可用性。其中，Distribute服务部署在两个Docker容器中，一个容器中集成了NFS（网络文件系统），用于从GitLab拉取项目文件，并通过NFS共享给另一Distribute容器和所有的Execute-Engine执行引擎，使得执行引擎能够访问和执行任务。系统的数据交互依赖于Kafka消息队列和MySQL数据库，其中Kafka用于任务指令的传递，MySQL用于存储执行结果。 系统的技术栈包括Docker用于容器化部署，SQLAlchemy作为ORM框架与MySQL数据库交互，Django作为后端开发框架，GitLab用于代码版本控制与项目文件存储，Kafka作为消息队列系统处理任务分发，uWSGI作为Web服务器部署Django应用。Python则是整个系统开发的核心语言，用于编写整个后端逻辑和任务执行脚本。 本系统的文件压缩包名为'distribute-main'，通过这个包名可以推断，该压缩包包含了Distribute系统的主体文件和代码，可能包括Django项目的主要文件、配置文件、任务分发和执行的逻辑代码等。" 知识点: 1. Django 2.2: Django是一个高级的Python Web框架，它鼓励快速开发和干净、实用的设计。在本项目中，Django被用于后端开发，提供Web界面给用户进行任务的下发和结果的查询。 2. Ansible: Ansible是一个自动化运维工具，可以自动化部署应用、配置管理、任务执行等。在这个项目中，Distribute使用Ansible将任务拆分并生成可被Kafka推送的指令集。 3. Kafka消息队列: Kafka是一个分布式流处理平台，被广泛用于构建实时数据管道和流应用程序。项目利用Kafka来分发任务指令，并保持Distribute和Execute-Engine之间的通信。 4. MySQL数据库: MySQL是一个流行的关系型数据库管理系统，用于存储结构化数据。在本系统中，MySQL被用于存储任务的执行结果，便于后续查询和分析。 5. Docker容器化: Docker是一个开源的应用容器引擎，可以让开发者打包应用以及应用的依赖包到一个可移植的容器中，然后发布到任何流行的Linux机器上，也可以实现虚拟化。本项目使用Docker来部署Distribute和Execute-Engine服务，以确保服务的高可用性和一致性。 6. NFS网络文件系统: NFS允许系统之间通过网络进行文件共享。在本项目中，NFS用于在Distribute容器之间以及与Execute-Engine之间共享从GitLab拉取的项目文件。 7. SQLAlchemy ORM: SQLAlchemy是一个Python编程语言的SQL工具和对象关系映射(ORM)库。它为应用程序提供了一个数据库抽象层，可以使得开发者以面向对象的方式与数据库交互。 8. GitLab: GitLab是一个用于仓库管理系统的开源平台，允许开发者管理Git存储库，并使用Git作为代码管理工具。项目中GitLab用于项目文件的版本控制和存储。 9. uWSGI: uWSGI是一个Web服务器，它用于部署和运行Python Web应用。在本项目中，uWSGI可能被用于部署Django Web应用，处理HTTP请求，并与Django框架交互。 10. Python编程: Python是一种广泛使用的高级编程语言，强调代码可读性和简洁的语法。本项目中，Python是主要开发语言，用于编写Distribute系统的后端逻辑和脚本。