# bdp-dataplatform

**Repository Path**: mirrors_wlhbdp/bdp-dataplatform

## Basic Information

- **Project Name**: bdp-dataplatform
- **Description**: 🔥🔥 AllData可定义数据中台，以数据平台为底座，以数据中台为桥梁，以机器学习平台为工厂，以大模型应用为上游产品，提供全链路数字化解决方案。产品正式演示体验、社群咨询、商务采购：https://docs.qq.com/doc/DVHlkSEtvVXVCdEFo
- **Primary Language**: Unknown
- **License**: GPL-3.0
- **Default Branch**: master
- **Homepage**: None
- **GVP Project**: No

## Statistics

- **Stars**: 1
- **Forks**: 2
- **Created**: 2022-01-07
- **Last Updated**: 2025-09-28

## Categories & Tags

**Categories**: Uncategorized

**Tags**: None

## README

# AllData数据中台

## [AllData@杭州奥零数据科技公司-官方网站](http://www.aolingdata.com)

## [AllData@杭州奥零数据科技公司-产品手册](https://www.yuque.com/aolingdata/product)

## [AllData@杭州奥零数据科技公司-社群商务咨询](https://docs.qq.com/doc/DVHlkSEtvVXVCdEFo)

## [AllData@杭州奥零数据科技公司-开源安装部署](https://github.com/alldatacenter/alldata/blob/master/install/install.md)

## AllData数据中台产品详细介绍
```
【产品介绍】AllData数据中台是可定义数据中台，上层是Wujie微前端架构，底座是可插拔的后端架构，AllData数据中台以数据平台为底座，以数据中台为桥梁，以机器学习平台为中层框架，AllData以大模型应用为上游产品，提供全链路数字化解决方案。

【核心优势】我们是一支敢为人先的技术探索研究团队，AllData产品涵盖15+大模块，36+核心功能，以及国产化+信创一体化部署版本。

【发布计划】杭州奥零数据科技团队预发布AllData数据中台v1.4.1版本，2025年12月30会逐步发布由AllData商业版团队集成的80+新的开源项目框架。

【产品矩阵：15+大模块】

模块1. 数据源平台: 多元数据接入枢纽，高效整合海量数据源头。

模块2. 数据库同步平台: 实现多库数据实时同步，保障数据一致性。

模块3. 数据中枢平台: 数据流转核心，协调各方数据交互与共享。

模块4. 数据汇聚平台: 广泛收集分散数据，构建统一数据资源池。

模块5. 数据存储平台: 安全可靠存储海量数据，满足多样存储需求。

模块6. 数据分析平台: 深度挖掘数据价值，提供精准决策分析依据。

模块7. 数据开发平台: 便捷开发数据处理流程，加速数据应用落地。

模块8. 数据治理平台: 规范数据管理流程，提升数据质量与可用性。

模块9. 数据安全平台: 全方位守护数据安全，防范各类数据风险。

模块10. 数据共享平台: 打破数据壁垒，促进数据在组织内流通共享。

模块11. 数据可视化平台: 直观呈现数据，让复杂数据一目了然。

模块12. 指标体系平台: 构建全面指标框架，量化评估业务表现。

模块13. 机器学习算法平台: 集成多种算法，助力智能模型快速构建。

模块14. 大模型应用开发平台: 降低大模型开发门槛，释放AI强大潜能

模块15. 后台管理：统筹系统配置运维，保障平台稳定运行。

【产品矩阵：36+核心功能】

功能01. 数据源平台，集成开源Chat2DB项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能02. 数据库同步平台，集成开源DBSwitch项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能03. 数据中枢平台，集成开源DataCap项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能04. 数据汇聚平台-数据集成管理，集成开源DataX项目，包含项目管理、数据源管理、注册中心、单任务、多任务、任务模版、任务详情、运行日志、执行配置等功能。

功能05. 数据汇聚平台-数据集成平台，集成开源Tis项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能06. 数据汇聚平台-数据同步平台，集成开源Seatunnel项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能07. 数据存储平台-数据平台，集成开源DataSophon项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能08. 数据存储平台-云原生数据平台，集成开源CloudEon项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能09. 数据存储平台-对象存储平台，发布后提供源码。

功能10. 数据存储平台-K8S集群管控平台，发布后提供源码。

功能11. 数据存储平台-GPU集群管控平台，发布后提供源码。

功能12. 数据分析平台-数仓建模平台，发布后提供源码。

功能13. 数据分析平台-数据湖平台，集成开源Paimon项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能14. 数据分析平台-湖仓平台中心，集成开源Amoro项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能15. 数据分析平台-湖仓一体化平台，集成开源Kyuubi项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能16. 数据开发平台-实时开发平台，集成开源StreamPark项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。。

功能17. 数据开发平台-实时开发IDE，集成开源Dinky项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能18. 数据开发平台-离线开发平台，集成开源DolphinScheduler项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能19. 数据开发平台-离线开发IDE，发布后提供源码。
 
功能20. 数据治理平台-数据权限管理，包含数据授权，包括对数据库，表，字段级别授权。

功能21. 数据治理平台-数据门户管理，包含数据字段、数据地图、数据查询、数据源、SQL控制台、行级变更等功能。

功能22. 数据治理平台-数据模型管理，包含数据管理、数据模型等功能。

功能23. 数据治理平台-数据标准管理，包含对比度统计、数据字典、字典对比、字典映射等功能。

功能24. 数据治理平台-数据质量管理，包含质量报告、质量任务、规则引擎、日志监控、质量统计等功能。

功能25. 数据治理平台-数据比对管理，包含数据库配置、调度任务、任务配置、任务实例、调度日志等功能。

功能26. 数据治理平台-数据质量平台，集成开源DataVines项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能27. 数据治理平台-元数据管理平台，集成开源OpenMetaData项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能28. 数据治理平台-元数据开发平台，发布后提供源码。

功能29. 数据安全平台，发布后提供源码。

功能30. 数据共享平台-数据服务平台，包含接口市场管理，接口日志管理，接口数据脱敏，第三方接口注册，第三方接口调用日志等功能。

功能31. 数据共享平台-API共享平台，集成开源SqlRest项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能32. 数据可视化平台-BI可视化平台，集成开源Datart项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能33. 指标体系平台，集成开源SuperSonic项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能34. 机器学习算法平台，集成开源CubeStudio项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能35. 大模型应用开发平台，集成开源BISHENG项目，引入开源项目，保留License协议和Notice声明，以及必要的二次开发。

功能36. 后台管理功能-包括系统管理、监控管理、服务器管理功能。

【产品矩阵：2+信创国产化版本】：

功能37. 国产数据库一体化平台，发布后提供源码。

功能38. 信创一体化平台，发布后提供源码。

```

## AllData发展历程

<img width="1400" src="https://github-readme-stats.vercel.app/api/pin/?username=alldatacenter&repo=alldata" />

<img width="1400" src="https://starchart.cc/alldatacenter/alldata.svg" />

## AllData操作流程图
<img width="1400" alt="image" src="https://github.com/user-attachments/assets/c9bfa4e6-9196-4341-97e9-d3d652ac811e">

## AllData架构设计图
<img width="1400" alt="image" src="https://github.com/user-attachments/assets/a13d2118-896a-4111-958c-3deb903c1f48">

## AllData技术社区 

<img width="1400" alt="image" src="https://github.com/user-attachments/assets/f91804db-9e45-4b22-958f-563bc6b9b578">

## AllData正式环境(部分截图)

<img width="2072" alt="image" src="https://github.com/user-attachments/assets/019c2b8d-5af4-4c2d-9092-22e1dbd52776" />

## 数据汇聚平台-数据集成管理

![1、配置数据源](https://github.com/user-attachments/assets/3bff5818-4504-45b6-b165-ca64eb2f36c3)
![5、构建Sink](https://github.com/user-attachments/assets/82228bb2-3ad6-48ec-ace1-0c77bd3ab274)
![6、字段映射](https://github.com/user-attachments/assets/1f1defb2-ca53-49ce-ba59-88595e0aa7db)
![7、构建同步任务Json](https://github.com/user-attachments/assets/d5f62194-d320-4f6a-9643-4be9cc45bf0f)
![8、选择定时调度任务模版，配置同步任务调度](https://github.com/user-attachments/assets/177d8908-8660-4841-abf8-52f944e8898f)


## 数据汇聚平台: 数据集成平台

![image](https://github.com/user-attachments/assets/72e37a17-4a50-4da8-9aa6-ff7cf09bf783)
![image](https://github.com/user-attachments/assets/2310ef12-07de-4b04-918a-b558d5a021de)
![image](https://github.com/user-attachments/assets/ecc4a3c2-5905-4d13-aaac-4d5efd8a0898)
![image](https://github.com/user-attachments/assets/4e240af0-df71-446a-ba6f-99b4a2270f39)
![image](https://github.com/user-attachments/assets/d0215c45-ee2a-44dd-b4e6-a035e7929041)


## 数据汇聚平台: 数据同步平台

![image](https://github.com/user-attachments/assets/35cd0552-7205-44fd-8544-9bc858d4b3e3)
![image](https://github.com/user-attachments/assets/0bbb2d8b-80de-4bbf-8b46-f14f6da16151)
![image](https://github.com/user-attachments/assets/33f4e28e-74e1-41b7-827f-14fb8e97f017)
![image](https://github.com/user-attachments/assets/9f1bd98f-9fa5-4ae5-9417-b97b66f5f7fd)
![image](https://github.com/user-attachments/assets/efa17ce2-5c90-4a5a-9e6b-db8730e8626a)


## 数据治理平台-数据模型管理

![1、数据模型管理](https://github.com/user-attachments/assets/d0cbf38c-2f2d-40b6-b1aa-b1a239acd111)
![2、增加模型基本信息](https://github.com/user-attachments/assets/6ae9af77-e35b-4350-9fb0-33d7d8149ee7)
![3、修改模型字段信息](https://github.com/user-attachments/assets/1fd9dc44-131e-4dba-8873-a12b39f3d773)
![5、管理数据列表](https://github.com/user-attachments/assets/32a36196-afd3-4af0-b921-3cd8525cc7f4)
![6、数据管理-主数据新增](https://github.com/user-attachments/assets/6c9d185d-4845-4c17-897e-a5fc01ff72b8)


## 数据治理平台: 数据门户管理

![1、数据源管理](https://github.com/user-attachments/assets/69e9a5bb-f77e-4951-802b-4e0300dc6d05)
![2、元数据同步](https://github.com/user-attachments/assets/9eeacecf-6ea2-4b0b-bef1-e9bd6f7d06f2)
![8、数据地图](https://github.com/user-attachments/assets/b79a556b-30fa-4e83-bd7a-e6048f18bf9e)
![9、元数据查询](https://github.com/user-attachments/assets/e6ecf5ce-1c14-4f84-9738-a3a181185d9e)
![11、行级变更](https://github.com/user-attachments/assets/fc81e898-dd60-4e79-835d-eba98d167cee)


## 数据治理平台: 数据标准管理

![1、标准管理](https://github.com/user-attachments/assets/fb37fb7b-4be8-43a6-b12e-09691b561f5a)
![5、新增数据标准成功](https://github.com/user-attachments/assets/5ce63fb6-01c5-45a9-b591-8b38cb5a1ef7)
![8、标准关系管理](https://github.com/user-attachments/assets/65ffb228-41b6-4535-a93e-19971c01e995)
![14、手工对照标准任务](https://github.com/user-attachments/assets/45ac18df-bdd1-4de6-a7cc-08a9d7877488)
![15、标准结果中心](https://github.com/user-attachments/assets/f97cd15d-aba6-4759-bf1f-8730b333630d)


## 数据治理平台: 数据比对管理

![15、标准结果中心](https://github.com/user-attachments/assets/5f312208-4203-44ea-8ee2-8a512f3b96a3)
![2、新增Mysql数据库](https://github.com/user-attachments/assets/e1e3d1b2-3034-4f48-82b7-436fe7f171d3)
![4、新增Doris数据库](https://github.com/user-attachments/assets/d8afad02-aa1c-46df-a08b-ed0736a329e6)
![7、运行数据比对任务](https://github.com/user-attachments/assets/b2f221b8-b220-4111-8d29-04879a7f845b)
![9、查看数据比对任务结果](https://github.com/user-attachments/assets/0ad48bea-05f7-4e39-b033-92dfb5da5990)


## 数据治理平台: 数据权限管理

![1、选中角色组-超级管理员](https://github.com/user-attachments/assets/27938b27-11e5-4418-8adc-c246c6a263c7)
![3、增加数据库权限授权](https://github.com/user-attachments/assets/d0acad52-9a7c-4291-8ea7-6d532f69fa53)
![4、数据表级别安全管理](https://github.com/user-attachments/assets/b5664f08-4058-4efa-ad4f-950d5d9de074)
![6、字段级别安全管理](https://github.com/user-attachments/assets/b470f1bf-ad3c-4156-b05b-333a14506fbe)
![image](https://github.com/user-attachments/assets/e19da8ad-191c-49dd-93b5-a5732be3d49e)


## 数据治理平台: 数据质量管理

![2、创建唯一性质量规则](https://github.com/user-attachments/assets/20549725-78e4-427e-b37b-d831b0d1311b)
![2、创建唯一性质量规则](https://github.com/user-attachments/assets/f7964a2a-79b1-413a-899e-8c92b3fb732b)
![11、创建关联性质量规则](https://github.com/user-attachments/assets/0ed8461f-cc7c-48dd-9d97-9d31dc0916e5)
![16、查看数据质量分析报告](https://github.com/user-attachments/assets/ed02bfdb-7fd5-4326-970a-be8c51f3b6b8)
![18、查看数据质量统计分析](https://github.com/user-attachments/assets/3e61b44e-cabd-4bd7-a351-327d2068c985)


## 数据治理平台: 元数据管理平台

![image](https://github.com/user-attachments/assets/5258ac10-a318-403b-9a86-8ea4685e81b3)
![image](https://github.com/user-attachments/assets/93178d6c-a38f-4ca9-af07-68cab2f7a8db)
![image](https://github.com/user-attachments/assets/e140811c-9a42-44bc-a4a0-03302a5ffb94)
![image](https://github.com/user-attachments/assets/274982df-738b-4cb0-8a84-d30b21d3c73e)
![image](https://github.com/user-attachments/assets/50a7f5a5-f311-44a6-b173-e10058994a02)


## 数据治理平台: 数据质量平台

![image](https://github.com/user-attachments/assets/e63a1795-9f69-4cf1-8114-6fdd10863eb5)
![image](https://github.com/user-attachments/assets/bfda0e48-67fe-4fdd-8681-d8c0760da525)
![image](https://github.com/user-attachments/assets/c5022751-165b-49c4-af21-61146ffa47fd)
![image](https://github.com/user-attachments/assets/c862ca76-4e86-42e5-b3e7-4dc47a5026f4)
![image](https://github.com/user-attachments/assets/157649be-88d2-4b02-b694-d0f359d9f53c)


## 数据共享平台: 数据服务管理

![6、创建数据服务](https://github.com/user-attachments/assets/66dd7c21-8714-4cba-9fa9-395f4068b6af)
![7、需要选择字段作为请求参数](https://github.com/user-attachments/assets/6132c7d5-60a3-4d8c-aed3-df63e8ed6395)
![9、数据库脚本创建数据服务（二选一）](https://github.com/user-attachments/assets/8977fb33-e657-4958-bdce-55a3d511a9b1)
![12、进入数据服务详情](https://github.com/user-attachments/assets/7fbf927a-9e42-4716-a3f6-a4f4c5f63638)
![19、第三方服务详情](https://github.com/user-attachments/assets/67749814-d674-4788-ac40-7505f23886a9)


## 数据可视化平台: BI可视化平台

![image](https://github.com/user-attachments/assets/a7257f3b-375d-4431-9a3c-8d3361b65432)
![image](https://github.com/user-attachments/assets/b617e15a-9194-48e7-91cc-22364a8db995)
![image](https://github.com/user-attachments/assets/daa030ff-7918-447f-b225-8ca30200f095)
![image](https://github.com/user-attachments/assets/8eebe910-4773-412a-b35e-0e383cc0f700)
![image](https://github.com/user-attachments/assets/9557c38f-9749-4d69-9e1f-9c4e67e54740)

## 后台管理: 系统管理

![image](https://github.com/user-attachments/assets/20ca5731-93ed-44ab-b84d-7b886c420f61)
![image](https://github.com/user-attachments/assets/657fe988-7aaa-46e7-93b4-a25ec77dc438)
![image](https://github.com/user-attachments/assets/522b2ff2-f30d-4dad-9854-7f7e7192b448)
![image](https://github.com/user-attachments/assets/653d50e2-0d75-4456-b65f-362192510bf3)
![image](https://github.com/user-attachments/assets/0eeb0c05-a2c2-4ffe-9e5a-8fff9e34a9e5)

## 数据存储平台: 数据平台

![image](https://github.com/user-attachments/assets/1b44c84d-a86b-4416-9ff5-5753ae5a5723)
![image](https://github.com/user-attachments/assets/6a735ba1-a82a-4b72-8c91-c3052c5e7650)
![image](https://github.com/user-attachments/assets/f052b929-81b6-42a8-a170-1662d63e2728)
![image](https://github.com/user-attachments/assets/cfa7b8fc-e4c5-4057-9024-2d7cd0adffa5)
![image](https://github.com/user-attachments/assets/edc62c24-90c7-4938-a89f-e0e61e460507)


## 数据存储平台：K8S平台

![image](https://github.com/user-attachments/assets/d6b800d2-8172-4ee1-a9c5-2e63bc232361)
![image](https://github.com/user-attachments/assets/8fe375fd-9935-4e2f-baac-38088fcf33bf)
![image](https://github.com/user-attachments/assets/08fdd88f-6f37-454d-be04-4d6e51360000)
![image](https://github.com/user-attachments/assets/9d1c56fc-3b25-4652-9d0c-5af6b224c5c8)
![image](https://github.com/user-attachments/assets/5f4e93b2-b981-4a8d-b118-af58793031b9)


## 指标体系平台

![image](https://github.com/user-attachments/assets/9ef6ab40-1de8-4fde-92a9-f126bca69596)
![image](https://github.com/user-attachments/assets/699096c2-69a4-4ee0-a720-e5479acb1f2b)
![image](https://github.com/user-attachments/assets/49d0f43e-686e-4ffb-b87c-6f703847df34)
![image](https://github.com/user-attachments/assets/aabfbcb8-e7a8-40c0-82e4-d1e30f3b838a)
![image](https://github.com/user-attachments/assets/8178813c-daa6-4232-8ae9-e4171de28f08)


## 数据开发平台: 实时开发平台

![image](https://github.com/user-attachments/assets/1c83ad69-8fa1-4eab-ae8a-17b9b7c8aaed)
![image](https://github.com/user-attachments/assets/4fca9d5f-ed47-42b8-84b6-fbd95be5ad16)
![image](https://github.com/user-attachments/assets/0f7b11df-06a2-44d6-9855-78ba1c5bf4f4)
![image](https://github.com/user-attachments/assets/c686e155-a0e8-48b4-bee4-35925d7c5e86)
![image](https://github.com/user-attachments/assets/874daa23-7353-43f0-b871-68a22cd5d7a7)


## 数据开发平台: 实时开发IDE

![image](https://github.com/user-attachments/assets/acee579b-5c56-4179-a121-c26c158d7c3e)
![image](https://github.com/user-attachments/assets/33599613-f5cf-4d5a-b68e-07291a2e501c)
![image](https://github.com/user-attachments/assets/b7b4a7ae-e40b-4e4b-a6ca-3d32c99b68f0)
![image](https://github.com/user-attachments/assets/13b083e7-8091-4e4d-819a-f5421df5224f)
![image](https://github.com/user-attachments/assets/fb511706-3ace-40a0-afe3-2ba9cdc34998)


## 数据开发平台: 离线开发平台

![image](https://github.com/user-attachments/assets/3edce009-996a-425a-9c5b-fe4299188330)
![image](https://github.com/user-attachments/assets/443c6afe-1b53-4803-aa42-0b6a887a67e9)
![image](https://github.com/user-attachments/assets/3e9731b0-4e60-455c-b506-cd74592204df)
![image](https://github.com/user-attachments/assets/5562ea5b-613c-4871-be81-b12188034d0f)
![image](https://github.com/user-attachments/assets/891f74f7-6850-4ebb-a2a9-3fc4ef23b7d3)



## 数据分析平台: 数据湖平台

![image](https://github.com/user-attachments/assets/8664f823-611e-4a6d-bb94-c8f4cc4eb908)
![image](https://github.com/user-attachments/assets/351d3095-c275-4ac3-99bc-cb104fb8c573)
![image](https://github.com/user-attachments/assets/33b51018-5f61-479e-a86c-6939d7db5041)
![image](https://github.com/user-attachments/assets/de3c088d-5038-4ffd-9cfd-bb60c9d78511)
![image](https://github.com/user-attachments/assets/d35017a5-f44a-4b46-a578-7fde371d19c9)


## 数据分析平台: 湖仓平台中心

![image](https://github.com/user-attachments/assets/5bd5dcb1-d152-4d8f-898d-ef7742fe5000)
![image](https://github.com/user-attachments/assets/178d782c-d3cf-4c62-b17e-6b8626eeb258)
![image](https://github.com/user-attachments/assets/1a9fcabb-1aac-4552-9461-bc3fed8936cb)
![image](https://github.com/user-attachments/assets/b7dcfc62-e209-48b6-ac29-b6e41a13557a)
![image](https://github.com/user-attachments/assets/28d069d7-0618-4fb9-b277-2d4c61acc4d8)


## 数据分析平台: 湖仓一体化

![image](https://github.com/user-attachments/assets/7e4e38b0-8326-42aa-8763-8c863f8e8af5)
![image](https://github.com/user-attachments/assets/5e7478b3-8356-4132-83a6-0e19efae1147)
![image](https://github.com/user-attachments/assets/aa03f9ab-3d7d-4b7a-9926-2c8aedb087f0)
![image](https://github.com/user-attachments/assets/5f85bffd-42b3-4f89-bdf7-326ad14cc46b)
![image](https://github.com/user-attachments/assets/afdbc81d-63ad-496d-ba27-3983d1ffeb25)


## 机器学习算法平台

![image](https://github.com/user-attachments/assets/81cbf4f8-1c0b-45e3-b21a-8b32ce5abecd)
![image](https://github.com/user-attachments/assets/3c063ee3-e2c9-4225-bc1a-0b12c1447431)
![image](https://github.com/user-attachments/assets/019c4f60-0816-4904-ad4c-622f36039643)
![image](https://github.com/user-attachments/assets/d2b90680-a7fa-4e51-b0dc-e2eb88d526e3)
![image](https://github.com/user-attachments/assets/27ef983d-83bd-46d2-b4f4-99903bdf15e1)