dolphinscheduler的数据库设计文档

2024年9月11日发(作者：)

dolphinscheduler的数据库设计文档

DolphinScheduler的数据库设计文档

DolphinScheduler是一个开源的分布式易扩展的大数据工作流调度系统，

它的数据库设计是系统的基石。本文将一步一步回答“DolphinScheduler

的数据库设计文档”这个问题，详细介绍了DolphinScheduler的数据库

设计。

第一步：需求分析

在设计数据库之前，需要进行需求分析，明确系统需要存储哪些数据以及

数据之间的关系。DolphinScheduler主要用于大数据工作流的调度和管

理，因此，系统需要存储的数据主要包括以下几个方面：

1. 用户信息：包括用户的姓名、账号、密码等基本信息；

2. 项目信息：包括所属用户、项目名称、项目描述等；

3. 工作流定义：包括工作流的名称、描述、最近修改时间等；

4. 工作流调度：包括工作流的调度计划、运行状态、执行结果等；

5. 任务定义：包括任务的类型、参数、依赖关系等；

6. 任务实例：包括任务的实例ID、运行状态、执行结果等。

第二步：数据库模型设计

在需求分析的基础上，可以开始进行数据库模型的设计。

DolphinScheduler采用关系型数据库MySQL作为数据存储引擎，下面

是DolphinScheduler的数据库模型设计概述：

1. 用户表（t_ds_user）：存储用户信息，包括用户ID、用户名、密码、

邮箱、创建时间等字段；

2. 项目表（t_ds_project）：存储项目信息，包括项目ID、项目名称、项

目描述、创建时间、所属用户等字段；

3. 工作流定义表（t_ds_workflow_definition）：存储工作流定义信息，

包括工作流ID、工作流名称、工作流描述、创建时间、最近修改时间等字

段；

4. 工作流调度表（t_ds_workflow_instance）：存储工作流调度信息，包

括调度ID、工作流ID、调度计划、运行状态、开始时间、结束时间等字

段；

5. 任务定义表（t_ds_task_definition）：存储任务定义信息，包括任务ID、

任务名称、任务类型、任务参数、依赖关系等字段；

6. 任务实例表（t_ds_task_instance）：存储任务实例信息，包括任务实

例ID、任务ID、调度ID、运行状态、开始时间、结束时间、执行结果等

字段。

这些表之间通过外键关联建立了数据之间的关系，例如用户表和项目表通

过用户ID关联，工作流定义表和项目表通过工作流ID关联，工作流调度

表和工作流定义表通过调度ID关联，任务定义表和工作流定义表通过任

务ID关联，任务实例表和任务定义表通过任务实例ID关联等。这样的关

联关系可以保证数据的完整性和一致性。

第三步：表结构设计

在数据库模型设计的基础上，需要具体设计每个表的表结构。以下是

DolphinScheduler数据库中各个表的示例字段：

1. 用户表（t_ds_user）：

- id: 用户ID

- user_name: 用户名

- password: 密码

- email: 邮箱

- create_time: 创建时间

2. 项目表（t_ds_project）：

- id: 项目ID

- project_name: 项目名称

- project_desc: 项目描述

- create_time: 创建时间

- user_id: 所属用户ID

3. 工作流定义表（t_ds_workflow_definition）：

- id: 工作流ID

- workflow_name: 工作流名称

- workflow_desc: 工作流描述

- create_time: 创建时间

- update_time: 最近修改时间

- project_id: 所属项目ID

4. 工作流调度表（t_ds_workflow_instance）：

- id: 调度ID

- workflow_id: 工作流ID

- schedule_time: 调度计划

- run_state: 运行状态

- start_time: 开始时间

- end_time: 结束时间

5. 任务定义表（t_ds_task_definition）：

- id: 任务ID

- task_name: 任务名称

- task_type: 任务类型

- task_param: 任务参数

- dependency: 依赖关系

- update_time: 最近修改时间

- workflow_id: 所属工作流ID

6. 任务实例表（t_ds_task_instance）：

- id: 任务实例ID

- task_id: 任务ID

- schedule_id: 调度ID

- state: 运行状态

- start_time: 开始时间

- end_time: 结束时间

- execute_result: 执行结果

以上是DolphinScheduler数据库中各个表的部分示例字段，具体的表结

构还可以根据实际需求进行调整。

总结：

本文介绍了DolphinScheduler的数据库设计。通过需求分析、数据库模

型设计和表结构设计等步骤，我们可以得到一个完善的数据库设计方案。

这个数据库设计方案可以保证数据的完整性和一致性，为

DolphinScheduler提供高效可靠的数据支持。通过合理的数据库设计，

可以提高系统的性能和可扩展性，为用户提供更好的工作流调度体验。