FATE 2.0 dag json格式

在FATE 2.0中，DAG（Directed Acyclic Graph，有向无环图）是一种用于描述工作流结构的方式，通常用于数据处理流程的调度和管理。DAG JSON格式是用来表示这种工作流的配置文件，它包含了节点之间的依赖关系以及每个节点的执行逻辑。

FATE 2.0的DAG JSON通常包含以下几个关键部分：

1. **nodes**（节点）：
每个节点是一个字典，包括：
- `job_id`: 节点的任务ID；
- `type`: 节点类型，如executor（执行者）、transformer（转换器）等；
- `inputs` 或 `output`: 子节点列表，描述输入或输出依赖；
- 其他配置选项，如超参数、执行函数等。

2. **edges**（边）：
边是关联两个节点的关系，表明了数据流动方向。每条边也是一个字典，通常包括：
- `src`: 发起方节点ID；
- `dst`: 目标方节点ID；
- 可能还有其他如数据传输方式等属性。

3. **pipeline**（管道）：
DAG的整个工作流可以作为pipeline（管道）来组织，由一系列节点和它们之间的边构成。

一个简单的例子：

{
  "nodes": [
    {
      "job_id": "node1",
      "type": "executor",
      ...
    },
    {
      "job_id": "node2",
      "type": "transformer",
      "inputs": ["node1"],
      ...
    }
  ],
  "edges": [
    {"src": "node1", "dst": "node2"},
    ...
  ]
}

要运行这个DAG，你需要将这个JSON配置文件提供给FATE 2.0的DAG调度器，它会按照逻辑顺序和依赖关系执行各个任务。