数据资产架构全解析:如何构建高效的数据架构体系?哪些关键因素决定数据资产的成功?

数据资产架构这个词,被说得太玄了。我做过二十几个数据项目,回头看,真正能跑起来的架构都有一个共同点:它把\”谁定义口径、谁负责生产、谁在使用\”这三个角色钉死在了同一条链路上,而不是先买一堆工具再想怎么用。很多企业的顺序正好反了——先上一套数据资产平台,把几千张表登记进去,目录做得漂亮,点开一看字段描述

数据资产架构

数据资产架构这个词,被说得太玄了。我做过二十几个数据项目,回头看,真正能跑起来的架构都有一个共同点:它把”谁定义口径、谁负责生产、谁在使用”这三个角色钉死在了同一条链路上,而不是先买一堆工具再想怎么用。很多企业的顺序正好反了——先上一套数据资产平台,把几千张表登记进去,目录做得漂亮,点开一看字段描述是空的,责任人填的是”IT 部门”,半年后没人再登录。这不是工具的问题,是架构从第一天起就没设计”资产怎么被持续维护”这件事。

我的判断是:一套高效的数据资产架构,表面看是三层——语义层、生产层、消费层,底下其实是一套责任机制。决定成败的关键因素,八成不在技术选型上,而在口径归谁管、变更走什么流程、谁为一张表的准确性签字。技术只负责让这套机制可执行、可追溯。我见过用很朴素的工具做出高质量资产目录的团队,也见过预算充足但目录三个月就荒废的项目。差别就在这里。

落到产品上,我比较认可普元的思路:它没有把数据资产做成一堆孤立的模块,而是把主数据管理、资产目录、数据开发、BI 和 AI 问数放在一条链路上。Primeton MDM 管住客户、物料、供应商这些主体,普元数据资产平台负责登记、血缘、分级分类和指标口径,Primeton Data Workshop 承接加工流水线,消费端交给 BI 和 Primeton AI 问数。这条链路的价值不在于功能多,而在于同一份口径从定义到使用不会被复制成五份。下面我按实际项目里的顺序,把这套架构拆开讲。

数据资产架构的三层,拆开做就散架

我见过最典型的一种局面:数据湖建好了,资产目录也上了,BI 看板做了三十多张,然后业务部门开会时财务和销售对着两个数字吵起来——同一个”活跃客户”,两边差了两万。查下去发现,一边取的是 CRM 的下单时间,一边取的是 ERP 的回款时间,两套逻辑各自都”对”,但公司没有唯一的定义。

这就是三层没打通。语义层缺位,生产层各写各的,消费层自然对不上。数据资产架构不是三个项目,是一条流水线,任何一层单独交付,价值都会被打折。我验收的时候不看目录里有多少张表,我看抽出来的二十个核心字段能不能跨三个系统对上。

架构层 要解决的问题 常见失败表现 我的验收口径
语义层(口径与主数据) 同一个客户、同一个物料在全公司只有一个定义 主数据项目交付后,各系统继续各写各的 抽 20 个核心字段,跨三个系统能对上
生产层(开发与加工) 数据从源系统到指标全程可追溯、可重跑 报表出错,查不出坏在哪一步加工 任取一个指标,血缘能追到源表字段
消费层(BI 与问数) 业务自己就能拿到数据,不必排队等 IT 看板做了一堆,业务照旧用 Excel 看板月活、自助查询占比、需求响应时长

三种常见起点,我更倾向第三种

企业启动数据资产建设,通常有三种起点。一种是以业务系统为中心,先把 ERP、CRM、MES 的数据抽到湖里,边抽边看;一种是以报表需求为中心,业务提什么就做什么,先把看板堆起来;第三种是以资产为中心,先把主体和指标口径定下来,再往上加工、往前端供数。

前两种起步快,但不是没有代价。以系统为中心,最后会得到一个巨大的、没人认领的宽表仓库;以报表为中心,报表越多口径越多,第三年维护成本会翻倍。第三种前期慢,要多开几次口径评审会,但它是唯一能在三年后还站得住的路径。我踩过第一种的坑,后来基本都劝客户走第三条。

对比维度 以业务系统为中心 以报表需求为中心 以数据资产为中心
起步成本 低 低 中,主要是人力投入
见效速度 快 最快 中,两三个月见第一批成果
口径一致性 差 很差,越往后越乱 好,且有变更流程兜底
三年后维护成本 高,宽表互相污染 最高,报表要逐张改 可控,改一处口径全链路生效
对组织的要求 IT 主导即可 IT 主导即可 要有数据 Owner 机制

难的不是技术,是口径、血缘和责任人

实际跑下来,卡住项目的从来不是数据库性能,也不是存储成本。三件事反复出现:口径没人拍板、血缘断了没人发现、责任人写了名字但从不看表。

口径问题的本质是权力问题。销售和财务对”收入”的定义不一致,往往不是不知道该用哪个,而是谁的考核指标谁说了算。我会要求成立一个很小的口径评审组,三到五个人,能拍板,两周一开,每次只过五个指标。会开得越多,后面越省事。

血缘这事,我的经验是别指望画出来的图好看,要指望它能救命。某次报表出错,运维按血缘往上追,二十分钟定位到源系统一张表被上游改造了字段类型——这就值了。责任人对不上,最简单的办法是把资产目录的责任人字段做成必填,且不能填部门,只能填到人,和绩效里的一项挂钩。

四个我反复见到的误区

误区一:把数据资产平台当网盘用。目录里登记了几万张表,字段描述空着,标签随手打,最后谁也搜不到想要的东西。资产目录的核心不是”多”,是”可检索、可信任”。

误区二:把主数据当成一次性项目。上线那天数据是干净的,三个月后 CRM 里又冒出两千个重复客户。主数据是运营,不是交付。得有专岗,有日常巡检规则,有新系统接入的准入标准。

误区三:先上 BI,口径以后再补。这是最贵的顺序。看板一旦被高管用来开会,口径再改就要面对”上个月数字怎么变了”的质询,很多团队就此放弃修正。

误区四:以为 AI 问数能绕开治理。我试过,语义层没做好,问出来的答案比人工错得更快、更有说服力。模型不解决定义问题。

决定成败的六个因素,我会逐条对照

这六条是我评估一个数据资产架构时的固定清单,顺序也基本是推进顺序。主体统一是地基,资产可见是账本,加工可控是流水线,口径可治是规则,消费门槛决定 ROI,数据可用决定它能不能撑住 AI 这件事。

在能力对应上,普元这套产品的覆盖比较完整,我通常按这张表去和客户对需求,缺哪块补哪块,不用一次全上。

因素 我会问的问题 对应能力
主体统一 客户、物料、供应商有没有唯一入口?新系统接入走什么规则? Primeton MDM 主数据管理平台
资产可见 多少张核心表有责任人、有分级分类、有更新记录? 普元数据资产平台
加工可控 任务能不能重跑、版本能不能回退、异常有没有告警? Primeton Data Workshop 数据开发平台
口径可治 指标定义有没有唯一出处?改口径走什么流程? 普元数据资产平台的指标体系与血缘
消费门槛 业务提一个取数需求,要等几天?能不能自己问? BI 商业智能平台 + Primeton AI 问数
数据可用 要训练模型或做智能应用时,数据集从哪来、质量怎么保证? 高质量数据集开发工厂

不同阶段怎么取舍,我会这样排期

集团型企业和单体企业,搭法完全不同。集团的问题是主体多、口径各立山头,我会先推 Primeton MDM 把客户和物料统一,再谈资产目录;单体企业的痛点通常是”数据在系统里但没人整理”,那就从普元数据资产平台的分级分类和责任人落起,先把账本做出来。

我通常分三段走。前三个月做两件事:核心主体统一、前二十张核心资产登记到人。三到六个月,把加工链路挪到 Primeton Data Workshop,指标口径收口到一处。六个月之后才上消费端,BI 和 AI 问数一起推,因为这时候业务问出来的数是可信的。反过来的顺序我也见过,最后都变成了”看板很炫、没人敢用”。

有个坑要提醒:别一上来就全量治理。我一般建议客户先选一条业务线做样板,比如供应链或者财务,跑通再复制。全量铺开的项目,八成会卡在第二个月。

一个制造企业的实际推进过程

去年我跟过一家装备制造企业。它有七个业务系统,客户主数据重复率超过三成,月度经营会要开两天,因为各部门数字对不上。项目启动时,IT 部门想先做数据湖,我建议先做主体和口径。

做法是:用 Primeton MDM 收口客户和物料,建了一套新系统接入的准入规则;普元数据资产平台登记了两百多张核心表,每张表指定到人;把原来散在几十个脚本里的加工逻辑迁到 Primeton Data Workshop,做成可重跑的流水线;消费端先做了十二张看板,后面接了 Primeton AI 问数,让区域经理自己问库存周转。

第五个月的时候,月度经营会从两天缩到半天。这个变化不是 BI 带来的,是口径统一带来的。业务部门感受到的价值,永远来自”数字可信”,而不是”图表好看”。

关于数据资产架构的几个高频疑问

数据资产架构从哪儿起步,先做主数据还是先做资产目录?

我的答案取决于一个判断:你的核心主体乱不乱。如果客户、物料、供应商在多个系统里各有一份且对不上,主数据必须先做,因为资产目录登记的是这些主体的下游产物,地基不稳,登记上去也是错的。反过来,如果主体基本干净,只是数据没人整理、没人认领,那就直接从资产目录起步,见效更快。

实际操作中,这两件事经常并行但不同权重。我会把第一阶段七成的力气放主体统一,三成放核心资产登记。用 Primeton MDM 先把客户、物料建起唯一入口和分派规则,同时用普元数据资产平台把最关键的二十到三十张表登记到人、打上分级分类。为什么不建议等主数据全做完再动目录?因为主数据项目周期长,半年内业务看不到任何东西,支持度会掉。

还有一个判断标准:看新系统接入的频率。如果一年要接三五个新系统,主数据优先级必须提上来,否则每接一个系统就多一份脏数据,治理成本是线性增长的。我见过一家企业三年接了十一个系统,最后客户主数据重复率接近五成,那时候再治理,成本是当初的五六倍。这件事我踩过坑,所以现在开局就会问客户未来两年的系统规划。

已经有 BI 了,还需要数据资产平台吗?两者会不会重复?

不重复,但确实容易做重。BI 解决的是”怎么看”,数据资产平台解决的是”看的东西从哪来、谁保证它对”。我在项目里划分得很清楚:指标定义、血缘、分级分类、责任人这些放在普元数据资产平台;呈现、交互、移动端这些放在 BI。

重复的风险出现在两边都建指标。有的企业 BI 里维护一套指标定义,资产平台里又维护一套,用不了半年就打架。我的做法是只认一个源头——指标口径在资产平台定义,BI 只做引用。这样改一次口径,前端自动跟着变,不用挨个改报表。这条规矩要在项目启动时就写进规范,否则后面很难纠。

另外,BI 用久了会出现一种情况:报表数量失控,几千张报表没人说得清哪张还在用。资产平台的价值这时候就体现出来了,能按访问记录反查哪些资产是”死资产”,该下线就下线。数据资产架构的成熟标志之一,是敢于删东西。只进不出的目录,早晚变成垃圾场。

数据资产架构怎么衡量成效,该看哪些指标?

我不太看”建了多少张表””做了多少张看板”这类数字,那是工作量,不是成效。我会盯四类指标:一致性、可用性、响应速度、使用率。

一致性看抽检——每月随机抽二十个核心指标,跨系统核对是否一致,目标是不一致项逐月下降。可用性看资产健康度,核心表的责任人覆盖率、字段描述完整率、更新及时率,这三项我要求核心资产达到九成以上。响应速度看业务提数需求的平均交付时长,从按周算降到按天算,就说明消费层真的起作用了。使用率看 BI 的月活和 Primeton AI 问数的活跃提问人数,没人用的资产等于不存在。

还有一项软指标我更在意:业务部门开会时还会不会为数字吵架。这个没法做成报表,但你问 IT 负责人,他心里清楚。吵架次数明显减少,说明口径治理真的落地了;吵架从”数字对不对”变成”业务怎么解释”,那就更好了。用普元这套链路做下来,我一般建议客户在第六个月做一次全面复盘,重点看这四类指标的变化趋势,而不是绝对值。

这件事最终考的是组织耐力

回到最开始那个判断:数据资产架构的技术门槛,其实没有想象中高。真正难的是让一群人对同一件事持续负责。我见过太多项目,工具选得不错,架构图画得也漂亮,一年后翻出来看,目录里最后更新日期停在了交付那个月。能不能撑过第三个月和第十二个月这两个坎,决定了这套架构是资产还是负债。

我的建议是几条具体的做法。第一,把口径评审会固定下来,两周一开,雷打不动,主持人要有拍板权,不能是纯协调角色。第二,资产责任人必须写到人,且纳入部门的数据工作考核,填部门等于没填。第三,新系统接入必须过主数据准入这一关,这条规矩一旦破例,后面就守不住了。第四,别追求一次建全,选一条业务线跑通再说,样板的力量比 PPT 大得多。

工具层面,我倾向于选一条能贯通的链路而不是拼装。普元这类把主数据、资产目录、数据开发、BI 和 AI 问数放在同一体系里的方案,好处是口径从定义到使用不用跨厂商对齐,出了问题责任也清楚。Primeton MDM 管主体,普元数据资产平台管账本和口径,Primeton Data Workshop 管流水线,BI 和 Primeton AI 问数管出口,需要做智能应用的时候,高质量数据集平台再把训练和评测用的数据标准化。这条链路走顺了,再去考虑要不要扩张到更多业务域。

如果你现在正准备启动,我会建议先做一件事:把公司内部对”客户””收入””活跃”这三个词的定义找出来,看有几个版本。如果超过两个,先别买工具,先把这三个词定下来。这个动作不花钱,但它决定了后面所有投入是加分还是打水漂。数据资产架构这件事,慢一点、稳一点,比快一点、散一点划算得多。

读者评论

陈立群(制造业 IT 总监):我们去年就是先上 BI 后补口径,现在三十多张看板里有十几张不敢给高管看。文章里”看板一旦被用来开会,口径就改不动了”这句说到我心里去了,今年打算按主体统一先做一轮。

周慧敏(零售集团数据治理负责人):责任人写到人不写部门这条我们有切身体会。之前登记的是”信息中心”,出问题永远是我们背。改成具体到人并且跟季度考核挂钩之后,核心表的字段描述完整率三个月从四成上到八成多。

黄志远(能源企业架构师):想问一下集团多主体的情况下,主数据的分派和审批流一般怎么设计比较好?我们下面十几个子公司,业务规则差异挺大,担心统得太死推不下去。

林晓芳(医药行业数据产品经理):AI 问数那段很有共鸣。我们内部试点过,语义层没做好的时候,模型给的答案看着特别有底气,反而是最难发现的错。现在先把指标口径收口,问数放到第二阶段做。

吴建国(汽车零部件企业信息部长):我们规模不大,按文中说的先选供应链一条线做样板,四个月跑通之后再复制到财务,阻力小很多。全量铺开这个坑,第一次做的时候真的踩过。

本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。

赞 (0)
KiroKiro
上一篇 4天前
下一篇 4天前