这个仓库 dagster
是一个用于构建数据管道和工作流的开源项目,从代码结构和内容来看,它具备以下特点和功能:
主要功能模块
- 存储配置:支持多种数据库作为存储后端,包括 MySQL 和 PostgreSQL。用户可以通过修改
dagster.yaml
文件来配置使用哪种存储后端。- MySQL 存储:定义了
DagsterMySQLStorage
类,使用MySqlStorageConfig
进行配置。相关代码位于dagster/python_modules/libraries/dagster-mysql/dagster_mysql/storage.py
。 - PostgreSQL 存...
- MySQL 存储:定义了