dolphinscheduler的数据库设计文档.pdf

dolphinscheduler的数据库设计文档

DolphinScheduler的数据库设计文档

DolphinScheduler是一个开源的分布式易扩展的大数据工作流调度系统，

它的数据库设计是系统的基石。本文将一步一步回答“DolphinScheduler

的数据库设计文档”这个问题，详细介绍了DolphinScheduler的数据库

设计。

第一步：需求分析

在设计数据库之前，需要进行需求分析，明确系统需要存储哪些数据以及

数据之间的关系。DolphinScheduler主要用于大数据工作流的调度和管

理，因此，系统需要存储的数据主要包括以下几个方面：

1.用户信息：包括用户的姓名、账号、密码等基本信息；

2.项目信息：包括所属用户、项目名称、项目描述等；

3.工作流定义：包括工作流的名称、描述、最近修改时间等；

4.工作流调度：包括工作流的调度计划、运行状态、执行结果等；

5.任务定义：包括任务的类型、参数、依赖关系等；

6.任务实例：包括任务的实例ID、运行状态、执行结果等。

第二步：数据库模型设计

在需求分析的基础上，可以开始进行数据库模型的设计。

DolphinScheduler采用关系型数据库MySQL作为数据存储引擎，下面

是DolphinScheduler的数据库模型设计概述：

1.用户表（t_ds_user）：存储用户信息，包括用户ID、用户名、密码、

邮箱、创建时间等字段；

2.项目表（t_ds_project）：存储项目信息，包括项目ID、项目名称、项

目描述、创建时间、所属用户等字段；

3.工作流定义表（t_ds_workflow_definition）：存储工作流定义信息，

包括工作流ID、工作流名称、工作流描述、创建时间、最近修改时间等字

段；

4.工作流调度表（t_ds_workflow_instance）：存储工作流调度信息，包

括调度ID、工作流ID、调度计划、运行状态、开始时间、结束时间等字

段；

5.任务定义表（t_ds_task_definition）：存储任务定义信息，包括任务ID、

任务名称、任务类型、任务参数、依赖关系等字段；

6.任务实例表（t_ds_task_instance）：存储任务实例信息，包括任务实

例ID、任务ID、调度ID、运行状态、开始时间、结束时间、执行结果等

字段。

这些表之间通过外键关联建立了数据之间的关系，例如用户表和项目表通

过用户ID关联，工作流定义表和项目表通过工作流ID关联，工作流调度

表和工作流定义表通过调度ID关联，任务定义表和工作流定义表通过任

务ID关联，任务实例表和任务定义表通过任务实例ID关联等。这样的关

联关系可以保证数据的完整性和一致性。

第三步：表结构设计

在数据库模型设计的基础上，需要具体设计每个表的表结构。以下是

DolphinScheduler数据库中各个表的示例字段：

1.用户表（t_ds_user）：

-id:用户ID

-user_name:用户名

-password:密码

-email:邮箱

-create_time:创建时间

2.项目表（t_ds_project）：

-id:项目ID

-project_name:项目名称

-project_desc:项目描述

-create_time:创建时间

-user_id:所属用户ID

3.工作流定义表（t_ds_workflow_definition）：

-id:工作流ID

-workflow_name:工作流名称

-workflow_desc:工作流描述

-create_time:创建时间

-update_time:最近修改时间

-project_id:所属项目ID

4.工作流调度表（t_ds_