DaYu(大禹)是一款基于云原生,微服务化的开源数据治理一体化平台,提供一套大型组织的数字化转型平台方案.
DaYu是根据中国夏朝的开国皇帝大禹关于"大禹治水"的事迹命名,面向当前数字化时代,数据洪流进行数字化治理,解决大型企业数字化转型的开源框架.主要包括相关数据治理的理念和工具,通过数据治理,为企业的数字化转型带来商业价值.
序号 | 板块 | 开源项目 | 开源地址 | 简介 |
---|---|---|---|---|
1 | 数据采集 | DataHub | https://github.com/datahub-project/datahub | Linkin开源 |
2 | 数据采集 | DataX | https://github.com/alibaba/DataX | DataX 是阿里云 DataWorks数据集成 的开源版本,在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。DataX 实现了包括 MySQL、Oracle、OceanBase、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS, databend 等各种异构数据源之间高效的数据同步功能。 |
3 | 数据采集 | InLong(应龙) | https://github.com/apache/inlong | 腾讯开源,贡献apache |
4 | 数据调度 | DolphinScheduler(海豚调度) | https://github.com/apache/dolphinscheduler | --- |
5 | 工作流 | AirFlow | https://github.com/apache/airflow | --- |