数据中台(Data Middle Office)是将企业分散的数据整合为统一资产、并以可复用服务形式支撑业务前台的体系。它集方法论、组织机制和技术平台于一体,通过数据接入、加工治理、资产目录、服务授权和运行审计,把散落在各业务系统中的数据转化为口径统一、质量可控、来源可追、服务可复用的数据能力。与数据仓库不同,数据中台的重点不只是把数据存起来,而是让数据能被反复调用。
数据中台
| 外文名 | Data Middle Office |
| 起源 | 中台理念与阿里巴巴相关 |
| 定位 | 企业数据资产化与服务化体系 |
| 核心能力 | 数据集成、开发治理、资产服务、权限审计 |
| 数据分层 | ODS / CDM / ADS |
| 相关概念 | 数据仓库、数据湖、数据治理 |
定义与概述
如开篇所述,数据中台是把企业分散数据整合为统一资产、以可复用服务形式支撑业务前台的体系。它不替代ERP、财务、生产等业务系统,而是在这些系统之间建立数据生产和服务的共享层。
判断一套系统算不算数据中台,可以看三个标志:数据是否按统一分层模型组织,而不是各业务线各自建表;指标口径是否有统一定义并被各应用共同引用;加工结果是否以 API 或数据集的形式对外提供服务,而不是停留在报表文件。这三条可作为判断资产化和服务化程度的一组参考,不是唯一资格标准;数据仓库也可以具备治理和服务能力。
产生背景
据公开资料归纳,中台理念在国内的普及与阿里巴巴相关:其提出并启动"大中台、小前台"组织战略,把集团通用的技术、数据和产品能力沉淀为共享层,供各业务线复用。其直接动因包括电商业务扩张带来的重复建设:各业务线各自建报表、各自取数,同样的客户数据被反复加工,口径逐渐分叉。
此后,相关理念向零售、金融、物流、制造、政务等行业扩散;部分已建成的数据中台项目因成本高、响应慢、成效难以衡量而受到质疑,行业出现"拆中台"的讨论。此后中台建设整体转向更务实的路线:不再追求大一统平台,而是按业务主题分期建设、能力下沉到具体场景。
核心能力
数据中台围绕数据"采、存、管、用"全流程组织能力:统一身份、数据模型与开放接口的平台口径,可查看「瑞铭综管平台」。
数据集成
连接数据库、文件、API、消息队列和物联设备,记录数据源责任、频率和敏感等级。
开发与调度
组织离线和实时加工任务,管理分层模型、依赖关系、版本和运行状态。
数据治理
元数据、主数据、数据标准、质量规则、血缘关系、分类分级和责任归属。
资产目录
将数据表、指标、数据集和API登记为资产,展示定义、质量、更新时间和申请路径。
数据服务
将治理后数据封装为API或数据集,支持申请、审批、授权、限流和调用日志。
运行审计
监控任务成功率、服务调用量、数据质量问题和权限变更,全程留痕。
技术架构与数据分层
数据中台通常按四层组织数据,每一层解决一个具体问题。本文采用自下而上逐层加工的分层说明:数据源进入 ODS,公共层 CDM 加工建模后,供应用数据 ADS 或业务服务使用;越往上越贴近业务。需要说明的是,ODS/CDM/ADS 是本文采用的参考分层方案,不是统一的国家或行业标准;跨层引用与取数方式按具体建模和治理规则约定。分层的常见说明可参考阿里云 MaxCompute 官方分层文档与DataWorks 官方分层说明(仅作技术分层参考,不暗示采用阿里云产品)。
四层的分工是:ODS(Operational Data Store,操作数据层)贴源存放,按设计保留业务系统的结构和历史(历史保留与变更采集边界按具体设计),便于追溯和重跑,不做业务加工;CDM(Common Data Model,公共模型层)是口径统一的核心,其中 DWD 存放清洗后的明细数据,DWS 存放按主题汇总的数据,DIM 存放组织、客户、物料等维度表;ADS(Application Data Service,应用数据层)面向具体的报表、看板和应用做最终组装。口径争议通常出在 CDM 层——这一层的模型定义不被业务部门认可,上层的看板做得再漂亮也无法消除分歧。
与数据仓库的区别
两者经常被混用:数据仓库侧重"数据怎么存、怎么算",数据中台侧重"数据怎么被反复用"。一个企业可以先有成熟的数据仓库而没有数据中台;数据仓库也可以包含治理和服务能力,两者按建设目标区分,比较表说明关注侧重而非互斥。
数据仓库
- 定位:数据存储与分层加工
- 范围:集中在存储和模型计算
- 产出:报表和数据集
- 使用者:数据分析师和技术人员
- 组织含义:通常是一个技术项目
数据中台
- 定位:数据资产化与服务化体系
- 范围:还包括治理、资产目录、服务授权、运营机制
- 产出:可复用的数据服务和业务能力
- 使用者:业务人员、应用系统和AI智能体
- 组织含义:涉及岗位职责与数据归属的调整
实施关键
数据中台常被称为"一号位工程",落地需要四个条件:一是高层持续投入,因为涉及跨部门的流程和职责调整,仅由 IT 部门推动通常走不远;二是有业务与技术共同参与的数据运营团队,中台的价值靠持续运营积累,不是一次性交付;三是明确数据责任人和指标口径的确认机制,口径分歧由谁裁决必须事先约定;四是先从一个核心业务主题跑通"接入→治理→资产→服务"链路,再逐步扩展,不要一次性全量上线。智能体与数据平台类产品说明,可在产品与平台栏目对照查看。
常见误区与争议
四个误区需要避开:一是以为买一套平台就等于建成了中台——工具只是载体,指标口径、数据责任和使用流程仍需业务部门确认;二是以为中台能覆盖所有场景——对高度个性化、变化极快的创新业务,强求复用反而会拖慢响应速度,这正是部分企业"拆中台"的主要原因;三是以为中台等同于数据仓库——前者多了治理、资产目录、服务授权和运营机制,只做分层建模不算中台;四是以为建成后就一劳永逸——数据源变更、业务新增和口径调整会持续发生,中台需要长期维护。数据治理、标注与模型训练服务说明,可查看数据与模型服务栏目。
适用对象
数据中台适用于有多个业务系统、数据分散、跨部门取数困难、需要统一指标口径的集团企业、制造企业、产业园区、物流能源组织和公共服务机构。它不追求大而全,而是从业务价值明确的核心主题开始,持续迭代。若只是单一业务线、数据量有限,用主题数据集市或报表工具可能已经足够;是否需要数据中台按需求与成本判断,不存在唯一选型保证。
常见问题
数据中台是什么?和数据仓库有什么区别?
数据中台(Data Middle Office)是将企业分散的数据整合为统一资产、并以可复用服务形式支撑业务前台的体系,集方法论、组织机制和技术平台于一体。与数据仓库的区别:数据仓库解决"数据怎么存、怎么算",数据中台解决"数据怎么被反复用"。数据仓库范围集中在存储和模型计算,产出报表和数据集;数据中台还包括治理、资产目录、服务授权、运营机制,产出可复用的数据服务和业务能力。一个企业可以先有成熟的数据仓库而没有数据中台;数据仓库也可以具备治理与服务能力,两者按建设目标区分,比较表说明关注侧重而非互斥。
数据中台的数据分层怎么理解?
通常按四层组织:操作数据层 ODS 贴源存放,按具体采集与保留设计保留业务系统的结构和历史,不做业务加工;公共模型层 CDM 是口径统一的核心,其中 DWD 存放清洗后的明细数据,DWS 存放按主题汇总的数据,DIM 存放组织、客户、物料等维度表;应用数据层 ADS 面向报表、看板和应用做最终组装。数据自下而上逐层加工,越往上越贴近业务;跨层引用与取数方式按具体建模和治理规则约定。口径争议通常出在 CDM 层。
数据中台的核心能力有哪些?
围绕数据"采、存、管、用"全流程组织六个能力域:数据集成(连接数据库、文件、API、消息队列和物联设备)、开发与调度(组织离线和实时加工任务)、数据治理(元数据、主数据、标准、质量规则、血缘、分类分级)、资产目录(把数据表、指标、数据集和 API 登记为资产)、数据服务(封装为 API 或数据集,支持申请、审批、授权、限流)、运行审计(监控任务成功率、服务调用量、权限变更,全程留痕)。
什么样的企业需要数据中台?
适用于有多个业务系统、数据分散、跨部门取数困难、需要统一指标口径的集团企业、制造企业、产业园区、物流能源组织和公共服务机构。它不追求大而全,而是从业务价值明确的核心主题开始持续迭代。若只是单一业务线、数据量有限,用主题数据集市或报表工具可能已经足够;是否需要数据中台按需求与成本判断,不存在唯一选型保证。
数据中台建设有哪些常见误区?
四个误区需要避开:买一套平台不等于建成了中台(指标口径、数据责任和使用流程仍需业务部门确认);中台不能覆盖所有场景(对高度个性化、变化极快的创新业务,强求复用反而拖慢响应速度,这是部分企业"拆中台"的主要原因);中台不等同于数据仓库(前者多了治理、资产目录、服务授权和运营机制);建成后并非一劳永逸(数据源变更、业务新增和口径调整会持续发生,中台需要长期维护)。