Skip to content

🔥🔥 AllData可定义数据中台,以数据平台为底座,以数据中台为桥梁,以机器学习平台为工厂,以大模型应用为上游产品,提供全链路数字化解决方案。产品正式演示体验、社群咨询、商务采购:https://docs.qq.com/doc/DVHlkSEtvVXVCdEFo

License

Notifications You must be signed in to change notification settings

alldatacenter/alldata

Repository files navigation

AllData数据中台

AllData数据中台产品详细介绍

【产品介绍】AllData数据中台是可定义数据中台,上层是Wujie微前端架构,底座是可插拔的后端架构,AllData数据中台以数据平台为底座,以数据中台为桥梁,以机器学习平台为中层框架,AllData以大模型应用为上游产品,提供全链路数字化解决方案。

【核心优势】我们是一支敢为人先的技术探索研究团队,AllData产品涵盖15+大模块,36+核心功能,以及国产化+信创一体化部署版本。

【发布计划】杭州奥零数据科技团队预发布AllData数据中台v1.4.1版本,2025年12月30会逐步发布由AllData商业版团队集成的80+新的开源项目框架。

【产品矩阵:15+大模块】

模块1. 数据源平台: 多元数据接入枢纽,高效整合海量数据源头。

模块2. 数据库同步平台: 实现多库数据实时同步,保障数据一致性。

模块3. 数据中枢平台: 数据流转核心,协调各方数据交互与共享。

模块4. 数据汇聚平台: 广泛收集分散数据,构建统一数据资源池。

模块5. 数据存储平台: 安全可靠存储海量数据,满足多样存储需求。

模块6. 数据分析平台: 深度挖掘数据价值,提供精准决策分析依据。

模块7. 数据开发平台: 便捷开发数据处理流程,加速数据应用落地。

模块8. 数据治理平台: 规范数据管理流程,提升数据质量与可用性。

模块9. 数据安全平台: 全方位守护数据安全,防范各类数据风险。

模块10. 数据共享平台: 打破数据壁垒,促进数据在组织内流通共享。

模块11. 数据可视化平台: 直观呈现数据,让复杂数据一目了然。

模块12. 指标体系平台: 构建全面指标框架,量化评估业务表现。

模块13. 机器学习算法平台: 集成多种算法,助力智能模型快速构建。

模块14. 大模型应用开发平台: 降低大模型开发门槛,释放AI强大潜能

模块15. 后台管理:统筹系统配置运维,保障平台稳定运行。

【产品矩阵:36+核心功能】

功能01. 数据源平台,集成开源Chat2DB项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能02. 数据库同步平台,集成开源DBSwitch项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能03. 数据中枢平台,集成开源DataCap项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能04. 数据汇聚平台-数据集成管理,集成开源DataX项目,包含项目管理、数据源管理、注册中心、单任务、多任务、任务模版、任务详情、运行日志、执行配置等功能。

功能05. 数据汇聚平台-数据集成平台,集成开源Tis项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能06. 数据汇聚平台-数据同步平台,集成开源Seatunnel项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能07. 数据存储平台-数据平台,集成开源DataSophon项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能08. 数据存储平台-云原生数据平台,集成开源CloudEon项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能09. 数据存储平台-对象存储平台,发布后提供源码。

功能10. 数据存储平台-K8S集群管控平台,发布后提供源码。

功能11. 数据存储平台-GPU集群管控平台,发布后提供源码。

功能12. 数据分析平台-数仓建模平台,发布后提供源码。

功能13. 数据分析平台-数据湖平台,集成开源Paimon项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能14. 数据分析平台-湖仓平台中心,集成开源Amoro项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能15. 数据分析平台-湖仓一体化平台,集成开源Kyuubi项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能16. 数据开发平台-实时开发平台,集成开源StreamPark项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。。

功能17. 数据开发平台-实时开发IDE,集成开源Dinky项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能18. 数据开发平台-离线开发平台,集成开源DolphinScheduler项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能19. 数据开发平台-离线开发IDE,发布后提供源码。
 
功能20. 数据治理平台-数据权限管理,包含数据授权,包括对数据库,表,字段级别授权。

功能21. 数据治理平台-数据门户管理,包含数据字段、数据地图、数据查询、数据源、SQL控制台、行级变更等功能。

功能22. 数据治理平台-数据模型管理,包含数据管理、数据模型等功能。

功能23. 数据治理平台-数据标准管理,包含对比度统计、数据字典、字典对比、字典映射等功能。

功能24. 数据治理平台-数据质量管理,包含质量报告、质量任务、规则引擎、日志监控、质量统计等功能。

功能25. 数据治理平台-数据比对管理,包含数据库配置、调度任务、任务配置、任务实例、调度日志等功能。

功能26. 数据治理平台-数据质量平台,集成开源DataVines项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能27. 数据治理平台-元数据管理平台,集成开源OpenMetaData项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能28. 数据治理平台-元数据开发平台,发布后提供源码。

功能29. 数据安全平台,发布后提供源码。

功能30. 数据共享平台-数据服务平台,包含接口市场管理,接口日志管理,接口数据脱敏,第三方接口注册,第三方接口调用日志等功能。

功能31. 数据共享平台-API共享平台,集成开源SqlRest项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能32. 数据可视化平台-BI可视化平台,集成开源Datart项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能33. 指标体系平台,集成开源SuperSonic项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能34. 机器学习算法平台,集成开源CubeStudio项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能35. 大模型应用开发平台,集成开源BISHENG项目,引入开源项目,保留License协议和Notice声明,以及必要的二次开发。

功能36. 后台管理功能-包括系统管理、监控管理、服务器管理功能。

【产品矩阵:2+信创国产化版本】:

功能37. 国产数据库一体化平台,发布后提供源码。

功能38. 信创一体化平台,发布后提供源码。

AllData发展历程

AllData操作流程图

image

AllData架构设计图

image

AllData技术社区

image

AllData正式环境(部分截图)

image

数据汇聚平台-数据集成管理

1、配置数据源 5、构建Sink 6、字段映射 7、构建同步任务Json 8、选择定时调度任务模版,配置同步任务调度

数据汇聚平台: 数据集成平台

image image image image image

数据汇聚平台: 数据同步平台

image image image image image

数据治理平台-数据模型管理

1、数据模型管理 2、增加模型基本信息 3、修改模型字段信息 5、管理数据列表 6、数据管理-主数据新增

数据治理平台: 数据门户管理

1、数据源管理 2、元数据同步 8、数据地图 9、元数据查询 11、行级变更

数据治理平台: 数据标准管理

1、标准管理 5、新增数据标准成功 8、标准关系管理 14、手工对照标准任务 15、标准结果中心

数据治理平台: 数据比对管理

15、标准结果中心 2、新增Mysql数据库 4、新增Doris数据库 7、运行数据比对任务 9、查看数据比对任务结果

数据治理平台: 数据权限管理

1、选中角色组-超级管理员 3、增加数据库权限授权 4、数据表级别安全管理 6、字段级别安全管理 image

数据治理平台: 数据质量管理

2、创建唯一性质量规则 2、创建唯一性质量规则 11、创建关联性质量规则 16、查看数据质量分析报告 18、查看数据质量统计分析

数据治理平台: 元数据管理平台

image image image image image

数据治理平台: 数据质量平台

image image image image image

数据共享平台: 数据服务管理

6、创建数据服务 7、需要选择字段作为请求参数 9、数据库脚本创建数据服务(二选一) 12、进入数据服务详情 19、第三方服务详情

数据可视化平台: BI可视化平台

image image image image image

后台管理: 系统管理

image image image image image

数据存储平台: 数据平台

image image image image image

数据存储平台:K8S平台

image image image image image

指标体系平台

image image image image image

数据开发平台: 实时开发平台

image image image image image

数据开发平台: 实时开发IDE

image image image image image

数据开发平台: 离线开发平台

image image image image image

数据分析平台: 数据湖平台

image image image image image

数据分析平台: 湖仓平台中心

image image image image image

数据分析平台: 湖仓一体化

image image image image image

机器学习算法平台

image image image image image

About

🔥🔥 AllData可定义数据中台,以数据平台为底座,以数据中台为桥梁,以机器学习平台为工厂,以大模型应用为上游产品,提供全链路数字化解决方案。产品正式演示体验、社群咨询、商务采购:https://docs.qq.com/doc/DVHlkSEtvVXVCdEFo

Topics

Resources

License

Contributing

Stars

Watchers

Forks

Packages

No packages published

Contributors 25