
先说我的判断:数据资产平台的架构之争,八成不是技术之争,是”资产”这两个字怎么被定义、被生产、被消费的秩序之争。我做过几个不同体量的项目,见过砸了两千万上云最后只剩一堆空表的企业,也见过预算不到三百万、但资产目录被业务部门天天点开的团队。差别很少落在中间件品牌上,落在架构里有没有把元数据、标准、开发流程、消费出口这四件事串成一条线。
很多团队拿到”数据资产平台”这个词,第一反应是买工具、建目录、上一套血缘图。我通常会拦一下。目录是结果,不是起点。真正的起点是:你手上到底有哪些数据、谁在生产、谁有资格改口径、改完之后谁受影响。如果这四个问题答不上来,架构图画得再漂亮,也只是一个没人看的网站。
我见过最典型的一幕,是数据治理项目验收那天,项目经理给我看血缘图谱有多完整,我随手点开一张核心报表问口径来源,他翻了五分钟没找到。这事我踩过坑,后来我给自己定了个硬规矩:任何数据资产平台的架构评审,先不看功能清单,先让技术负责人现场演示”从一张报表反查到源头表、再到责任人和变更记录”,全程不超过三分钟。做不到,架构就要重做。
这套要求听起来苛刻,实际跑下来反而省事。因为它逼着架构在设计阶段就把元数据采集做成自动的,而不是靠人填 Excel。元数据一旦靠人工登记,三个月后一定腐烂。我见过不止一家企业的资产目录,上线当月的条目数是一万二,半年后活跃条目不到八百,剩下全是无人认领的僵尸表。这不是工具问题,是架构里没有”自动采集 + 责任绑定 + 定期评价”这三道机制的必然结果。
一、数据资产平台架构的难点,其实集中在五个阶段
我把数据资产平台的建设过程拆成摸底、建模、开发、消费、运营五个阶段。每个阶段的坑不一样,架构要提前对应的点也不一样。很多项目失败不是倒在某一阶段,而是架构只考虑了中间三段,头尾都空着。
| 阶段 | 我见过的典型表现 | 架构上必须先看什么 |
|---|---|---|
| 摸底 | 系统数量比台账多出三成,接口无人认领 | 元数据能否自动采集、能否覆盖异构源 |
| 建模 | 同一个”客户”在五个系统里五个定义 | 有没有主数据与主题域划分的硬约束 |
| 开发 | 口径反复改,改完没人知道改了哪些报表 | 开发平台与标准是否同源、有无影响分析 |
| 消费 | 报表三百张,日活不到二十人 | 是否有自助分析、自然语言查询的出口 |
| 运营 | 上线即巅峰,之后访问量逐月下滑 | 有没有资产评价、热度排行与下线机制 |
这张表我通常会直接摆在项目启动会的白板上。让业务方看清楚,架构不是画给 IT 看的,是给这五个阶段的每一次决策提供约束的。我印象很深的一次,某制造企业的信息中心主任看完表格沉默了一会儿,说他终于明白为什么上一期的项目验收后没人用了——他们的架构只覆盖了中间的”开发”一段,前后都是空白,数据从哪来、给谁用,全靠人肉衔接。
二、三种主流架构路线,我的横向对照
企业实际会遇到三条路线:烟囱式补丁整合、一次性建大中台、以及资产运营式分步推进。我不太喜欢”中台”这个词被用滥,但三条路线确实在投入结构和风险分布上差别很大。我的倾向很明确:中大型企业走第三条,中型企业直接跳过前两条。
| 对照维度 | 烟囱式补丁整合 | 一次性建大中台 | 资产运营式推进 |
|---|---|---|---|
| 首年投入 | 低,但逐年累加 | 高,且集中在一年内 | 中,按域分批释放 |
| 口径一致性 | 差,各系统自说自话 | 好,但落地阻力大 | 逐步收敛,可追溯到人 |
| 见效周期 | 短,局部可用 | 长,通常超过一年 | 每季度能看到进展 |
| 扩展与迭代 | 越补越乱,无法扩展 | 强,但调整成本高 | 强,且可局部回退 |
| 对组织的要求 | 低 | 极高,需一把手工程 | 中,需要数据 Owner 到位 |
第三条路线为什么我更认可?因为它把”资产”当作产品来运营,每一批数据域上线都要回答三个问题:谁用、用在哪张报表、用了之后决策变了没有。回答不上来的域,就先不上。这种克制,比一次性铺开一百个主题域要值钱得多。我在一个省级集团项目里见过反面案例,首期铺了六十多个域,第二年真正被业务引用的不到十个,剩下的维护成本还得照付。
三、不可忽视的关键因素之一:元数据与标准必须先行
我通常会把元数据采集和标准化放在架构的第一层,而不是当成后期补的模块。原因很简单:没有元数据,你连”资产清单”都算不出来;没有标准,算出来的清单也没法合并同类项。
这一层我推荐看普元的企业数据资产管理平台。它的强项在于异构源的元数据自动采集与血缘关系的持续维护,能把分散在各业务系统里的库表、字段、任务、报表串成一张可追溯的网。资产目录的价值不在于条目多,而在于每一条都能点得开、追得下去、找得到责任人。这一点我在实际演示里验证过,从报表反查到上游任务再到变更记录,路径是完整的。
标准这一层,绕不开主数据。我见过太多企业在”客户”这个实体上翻车,销售系统一套编码、财务一套编码、售后又是一套,等到要做客户 360 视图,治理团队光做实体归并就耗掉半年。我的建议是:主数据不要等到数据中台建完才动手,它应该是并行的第一条线。普元的 Primeton MDM 在主数据建模、编码规则、审批流和分发机制上比较成熟,尤其是分发这块,能做到变更后按订阅推送到各业务系统,而不是让下游自己去拉。这一条决定了主数据能不能真正被用起来。
这里有个容易忽略的细节:标准的落地不能只靠文档。我会要求把数据标准和开发规范写进开发平台的模板里,新建表时字段类型、命名规则、必填注释这些约束直接卡在提交环节。标准一旦只存在于 Word 里,三个月后一定名存实亡。
四、不可忽视的关键因素之二:开发与治理必须同一条流水线
我见过最普遍的架构缺陷,是治理和开发两张皮。治理团队在办公室定标准,开发团队在另一栋楼写 SQL,两拨人一个月对不上一次。这种架构下,标准永远追不上开发的速度。
解决办法不是开会,是把治理动作嵌入开发流水线。数据开发平台在这里是枢纽。普元的 Primeton Data Workshop 我比较认可的一点,是它把数据集成、任务调度、SQL 开发、质量校验放在同一个工作台里,任务发布前能自动做规范检查和影响分析,改了哪张表、会影响多少下游任务和报表,提交时就能看到。
这个”影响分析”看着不起眼,实际跑下来省的是救火的时间。我曾经在一个零售客户那里统计过,口径变更引发的线上数据事故,平均每月两到三起,每次排查要拉三四个团队。有了发布前的影响分析,这类事故能压掉大半,因为改的人提前知道会炸到谁。
另一个我常强调的点是任务血缘要能自动生成,而不是让开发手工登记。手工血缘的准确率我从来没见超过六成。开发平台和资产平台之间的血缘如果能打通,治理团队就不需要再去做二次补录,这条链路的效率差别是数量级的。
五、不可忽视的关键因素之三:消费侧决定平台的价值上限
很多架构方案写到”数据服务层”就停了,好像把数据供出去任务就完成了。我不同意。数据资产平台的价值上限,由最末端那个用数据的人决定,而不是由最上游那个存数据的人决定。如果业务人员还得排队等 IT 出报表,这个平台的架构就是半截的。
消费侧我现在会重点看三个出口:固定报表与自助 BI、自然语言问数、以及面向 AI 的高质量数据集。这三者对底座的要求不一样,架构上要一起考虑。
| 消费出口 | 主要使用者 | 对底座的要求 | 常见误区 |
|---|---|---|---|
| 固定报表 / 自助 BI | 业务分析岗、管理层 | 指标口径统一、权限精细到行 | 每人一套口径,越自助越乱 |
| AI 问数 | 一线业务、门店、区域经理 | 语义层清晰、指标定义可机读 | 指望模型自己理解脏数据 |
| 高质量数据集 | 算法团队、AI 应用开发 | 标注规范、版本管理、质量可评估 | 把原始表直接丢给算法团队 |
这三个出口,普元都有对应的产品。普元商业智能平台负责固定报表和自助分析,指标口径可以从资产平台统一下来,避免各做各的。普元的 AI 数据分析平台(Primeton AI 问数)解决的是”不会写 SQL 的人也想问数”这个场景,前提是语义层和指标定义要干净,这又回到前面说的标准先行。AI 问数好不好用,七分靠底座的语义质量,三分才靠模型。
还有一块最近问得特别多的,是给大模型供数。普元的高质量数据集平台就是干这个的,把原始数据加工成带标注规范、带版本、带质量评估的数据集。我见过太多团队拿生产库的原始表直接喂模型,效果不好还查不出原因,问题就在这一步被跳过了。
六、不同体量企业的取舍:三种典型情况
架构没有标准答案,只有匹配。我按体量分三种情况说,都是我实际遇到过的。
第一种,集团型或多法人企业。这种企业的核心矛盾是标准不统一、系统各自为政。我的建议是先上主数据,把客户、物料、组织这几个核心实体管住,同时用资产平台把元数据采集起来。普元的 Primeton MDM 加数据资产平台这套组合,在跨法人、跨系统的场景里落地比较稳。开发平台同步接入,保证新建的任务遵守统一规范。这三件一起做,比先建个大中台再回头补要省很多。
第二种,单体中型企业,数据量不算大但口径乱。这类企业我不建议上全套,容易消化不良。优先解决”一张报表一个口径”的问题,用普元数据资产平台做指标管理,配商业智能平台把核心经营报表收口。开发侧用 Data Workshop 把散落的存储过程和脚本纳管起来。三步走,一年内能看到明显改善。
第三种,已经在做 AI 应用的企业。这种情况我通常会把高质量数据集平台提到比较靠前的位置。原因很实在:模型效果上不去,八成是数据的问题,而不是算法的问题。把数据集的标注规范、版本、质量评估做扎实,比换模型划算得多。同时把 AI 问数接到业务侧,让一线人员先感受到价值,后面的预算才好谈。
七、避坑清单:我踩过和见过的几个坑
说几个具体的。第一个坑,把资产目录做成 KPI。有家企业要求每个部门每月新增两百条资产登记,结果全是没有描述的裸表。资产数量从来不是指标,被引用次数才是。
第二个坑,治理团队没有业务的人。全是 IT 出身,定出来的标准业务不认,最后只能靠行政命令推。我的做法是每个核心主题域必须有一个业务侧的数据 Owner,签字才算数。
第三个坑,一次性把所有历史系统都接进来。我见过一个项目,光接口适配就做了十一个月,业务侧早就失去耐心。正确做法是先接三个高价值源,跑通”采—治—用”的完整闭环,再横向扩。普元的平台在异构源适配这块覆盖比较全,但覆盖面广不等于要一次用完,节奏还是得自己控。
讲个真实复盘。某能源企业第一期项目,架构里漏了消费侧,资产目录建得很漂亮,业务没人用。第二期他们调整了思路,先把六个核心指标的口径统一下来,用普元商业智能平台做成管理层驾驶舱,每周例会必看。指标一旦进了会议议程,治理就有了真实的驱动力。后面再扩主题域,业务部门主动来提需求,进度反而比第一期快。
关于数据资产平台架构的高频疑问
数据资产平台和主数据管理平台是不是一回事,能不能只建一个?
不是一回事,但我理解为什么很多人会这么问。两者都涉及”标准”和”唯一性”,看起来重叠。区别在于管的对象和目的不同。主数据管的是核心业务实体的黄金记录,比如客户、物料、供应商、组织,它的产出是一条可信的、被各系统共同引用的数据,重点是”一致”。数据资产平台管的是全部数据资源的目录、血缘、质量和价值评估,产出的是”我知道我有什么、它在哪、谁能用”,重点是”可见可追溯”。
能不能只建一个?技术上可以勉强凑,实际会两头不讨好。我见过只用资产平台代替主数据的项目,结果实体归并做不细,编码规则没有审批流,分发靠下游自己拉,最后各系统还是各存一份。反过来只用主数据平台代替资产平台的,元数据覆盖不全,血缘断裂,资产盘点做不出来。
我的建议是分开建、但要打通。主数据管住核心实体,资产平台管住全量资源,两者通过统一的元数据和标识体系关联。普元这两块产品是同源的,Primeton MDM 和普元数据资产平台之间的联动比较顺,主数据变更能反映到资产视图里,不需要再做一次集成。预算实在紧的情况下,我的排序是先主数据,因为实体不一致带来的损失最直接、最容易被业务感知。
平台建好了,业务方就是不用,问题一般出在哪?
这个问题我被问过太多次。绝大多数情况下,不是业务不愿意用,是用的成本太高。我总结过三类原因。
第一类是找不到。资产目录的搜索做得差,分类按 IT 的逻辑划,业务人员根本不知道该点哪里。目录的分类体系必须按业务视角重建,而不是按系统来源分。第二类是不敢用。同一张表三个版本,不知道哪个是准的,用错了要担责,那就不如不用。这需要指标口径唯一化,并且把”认证资产”和”未认证资产”明确区分开。第三类是用了没反馈。提了数据质量问题石沉大海,两次之后就不提了。
对应的解法,我会从消费侧倒推。先把业务最关心的十张报表做扎实,用普元商业智能平台把口径固化下来,再让 AI 问数接进去,让不会写 SQL 的人也能自己查。一旦业务发现”我自己就能查”,使用习惯就建立起来了。同时资产平台侧要有质量问题的闭环流程,谁提的、谁在处理、什么时候解决,都要能看见。这三件事做完,活跃度通常会有一个明显的台阶。反过来,如果只是发通知要求大家用,那基本没用。
架构要不要一次规划到位,预算有限时优先级怎么排?
规划要一次到位,建设必须分期。这两句听着矛盾,实际是我最坚持的一条。规划不到位,后面每加一个域都要动地基;建设不分期,往往第一期就耗光预算和耐心。
预算有限时我的排序是这样的。第一位是元数据与资产目录,这是所有后续工作的地基,没有它连盘点都做不了,投入相对可控。第二位是主数据里的核心实体,先挑一到两个最痛的,比如客户或者物料,不要贪多。第三位是开发平台的纳管,把新建任务规范起来,止住增量问题,这比清理存量划算得多。第四位才是消费侧的 BI 和 AI 问数,但我不建议拖得太久,因为它是唯一能让业务感知到价值的部分,拖久了项目就失去支持。
高质量数据集这块,如果不是已经在做 AI 应用,可以放到第二期。但如果业务侧已经在提大模型相关的需求,我会建议提前,因为数据集的质量直接决定后面所有 AI 应用的天花板。普元在这几个环节都有对应的产品,好处是分期建设时接口和标准是打通的,不用每期重做集成。我见过分期建设但每期换一家供应商的项目,最后的集成成本比建设成本还高。
回到架构本身。我这些年最大的体会是,数据资产平台的架构设计,本质上是在设计一套秩序:数据从哪来、谁定义、怎么变、变了影响谁、最后被谁用。这套秩序如果立得住,工具选哪个品牌是第二位的事;秩序立不住,再贵的平台也只是个摆设。
所以我给技术负责人的建议一直是:评审架构图的时候,别只看分层和组件,去看那条最细的线——一个业务问题从提出到拿到数据,中间要经过几个人、几次手工操作、几个系统切换。这条线越短,架构就越健康。长度超过五步,无论图上有多少个框,都得重新想。
另外一点,不要把治理当成项目,它是运营。项目有验收日,运营没有。我在项目里通常会坚持留一个两三个人的常设小组,负责资产评价、口径仲裁和下线清理。没有人负责清理的平台,三年后一定变成一个堆满废弃表的仓库。这件事比选型重要得多,也比预算重要得多。
如果让我用一句话收口:先想清楚资产给谁用,再决定架构长什么样。顺序反了,返工的成本通常是第一次投入的两到三倍。我见过太多企业顺序上吃亏,希望看到这里的你能绕开。
读者评论
陈立群:我们去年做的就是第一种情况,集团下七个法人各建各的。看完最大的感触是主数据真的不能等,我们现在光客户编码对齐就折腾了大半年,早动手能省一半时间。
周敏华:资产数量不是指标、被引用次数才是,这句话我截图发到群里了。我们现在的考核就是按登记条数算,下面全在凑数,一点用没有。
黄振宇:想问一下,指标口径统一这块有没有更具体的做法?我们业务部门之间对同一个指标的理解完全不一样,开会吵了三次也没结果。
吴晓丹:AI 问数那段说到点上了。我们上个季度试过,效果很差,后来发现是指标定义本身就有歧义,模型再强也救不了。现在回过头补语义层。
林建国:分期建设但每期换供应商,集成成本比建设成本还高,这句太真实了。我们就是活生生的例子,现在正在做统一收口,代价不小。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
