
一、核心判断:平台的价值不在于“存”,而在于“敢用”
我做过二十多个数据资产相关的项目,最深的体会是:数据资产管理平台的价值,从来不是把数据集中起来,而是让业务方在一分钟内找到、看懂、敢用一个数据。集中只是手段。我在一家装备制造企业做过调研,他们有三百多张核心业务表,散落在 ERP、MES、CRM 和一堆 Excel 里。IT 部门说数据都在,业务部门说找不到。这两句话同时成立,因为“在”和“可用”之间隔着目录、标准、血缘、质量四条河。
所以我对这个平台的重要性有个很朴素的判断标准:它能不能缩短一个业务人员从“有个问题”到“拿到可信答案”的时间。如果上线一年,这个时间没变短,那这套系统只完成了资产登记,没有完成资产运营。我见过太多企业把数据资产目录做成了漂亮的 PPT,截图很好看,实际没人点开。这不是平台的问题,是建设思路的问题——把平台当成了档案室,而不是当成了工具台。
至于高效的技术架构设计,我的主张是先定消费场景,再定模型分层,最后才选组件。顺序反了,架构就会变成组件的堆叠。很多团队一上来就讨论湖仓选型、元数据中心选哪个、要不要上实时链路,讨论了三个月,业务场景还没梳理清楚。这种讨论没有答案,因为脱离了消费端的架构没有评价标准。真正高效的架构,是让新增一个数据源的成本可控、让一条血缘可以追溯到字段级、让一个指标的口径只有一处定义。
这篇内容我想讲清楚两件事:这个平台为什么在企业数字化里越来越像水电煤一样的基础设施,以及我实际做架构设计时会怎么拆分层次、怎么排优先级、哪些地方最容易翻车。里面会提到普元在数据资产、主数据、数据开发这几块的产品落位,也会给几个我亲历的判断标准。
二、我判断一个企业要不要建数据资产平台,先看三个信号
不是所有企业都到了必须建平台的时候。我通常会看三个信号,出现两个以上,这件事就值得启动。第一个信号是“同一指标多个答案”——财务算出来的营收和业务算出来的营收对不上,开会先吵口径再谈业务,这种内耗一旦成为常态,说明缺的不是人,是统一的数据定义。第二个信号是“数据需求排队超过两周”,业务提一个取数需求,数据团队排期排到半个月后,说明数据的供给方式还停留在人肉阶段。第三个信号是“关键人员离职带走数据知识”,表结构、字段含义、计算逻辑全在某个人的脑子里,这人一走,整条链路没人敢动。
这三个信号背后是同一个东西:数据的组织化程度不够。而平台要做的,就是把隐性的个人经验变成显性的组织资产。我下面列一张对照表,是我在项目启动会上常用的沟通材料,帮业务方理解“问题—能力—交付物”的对应关系。
| 实际痛点 | 需要的能力 | 平台上对应的交付物 |
|---|---|---|
| 不知道有哪些数据、在哪 | 资产盘点与目录编目 | 资产目录、业务术语表、检索入口 |
| 同名不同义、口径打架 | 数据标准与指标管理 | 数据标准库、指标口径定义、命名规范 |
| 数据出问题查不到源头 | 血缘与影响分析 | 表级/字段级血缘图谱、变更影响清单 |
| 数据质量差但说不清差在哪 | 质量规则与稽核 | 质量规则库、稽核报告、问题工单 |
| 数据不敢给外部使用 | 分级分类与权限 | 数据分级清单、脱敏策略、授权流程 |
| 数据用不起来、复购率低 | 分析消费与服务运营 | 自助分析、指标看板、API 服务 |
这张表的价值在于,它把“建平台”从技术议题翻译成了业务议题。我在汇报时只讲中间那一列,不讲产品功能。因为业务方不关心你用什么组件,只关心他的问题有没有被接住。实践跑下来,凡是能把这六行讲透的项目,立项都顺;讲不透的项目,往往做到一半就变成 IT 部门的自嗨。
三、三条建设路线,我为什么不建议走中间那条
市面上做这件事的路径大致分三种,我在不同规模的企业里都试过。第一种是“目录先行”,先把资产盘清楚、编目建起来,再逐步补标准和血缘;第二种是“场景驱动”,从一两个高价值的分析场景切入,边做边扩;第三种是“标准先行”,先花半年把全企业的数据标准和主数据治理干净,再谈平台。三种都能成,但成本和风险差别很大。
我个人最推荐第二种,原因很直接:它能最快产生可见的业务价值,从而换取后续投入的政治资源。标准先行听起来最严谨,但我见过三个项目卡在这一步,标准文档写了八百页,业务方根本不用,因为没有场景支撑的标准只是纸面规范。目录先行是很多企业的默认选择,风险在于做完目录之后没有下一步,容易变成“登记完就闲置”。
| 对比维度 | 目录先行 | 场景驱动 | 标准先行 |
|---|---|---|---|
| 首次见效周期 | 3–6 个月 | 1–3 个月 | 6–12 个月 |
| 业务方参与度 | 中,多为被动配合 | 高,有明确诉求方 | 低,容易变成 IT 独角戏 |
| 失败风险点 | 建成后无人使用 | 场景选错导致价值不显 | 标准脱离实际、无法落地 |
| 对组织能力的要求 | 中等 | 较高,需要跨部门协同 | 很高,需要强治理授权 |
| 适合的企业阶段 | 数据分散、底数不清 | 有明确业务痛点和预算 | 集团型、强管控型组织 |
我通常会给客户一个折中方案:用场景驱动开局,但在第一个场景里就埋下标准和目录的种子。比如第一个场景是供应链的交付及时率分析,那就场景里把“交付及时率”这个指标的口径、涉及的五张源表、字段的命名规范一次性定清楚。做完这一个,再复制到第二个场景。这样标准是被业务需求倒逼出来的,而不是强行推下去的,接受度高得多。
说白了,数据资产这件事最怕的就是“大而全的启动”。我见过一个项目启动会请了四十多个人,做了一年,最后交付的目录里有一万两千个字段,真正被查过的不到百分之三。这个比例我记得很清楚,因为它说明了纯自上而下的建设方式有多低效。
四、平台买了用不起来,八成是这几个地方出了问题
我复盘过几个不太成功的项目,问题基本不在产品能力上,而在几个很具体的地方。最常见的是“资产目录只编目、不运营”。目录建完就没人维护,新表不上架,老表不更新,三个月后目录和现实脱节,业务方点两次找不到想要的东西,就再也不来了。这件事我踩过坑,后来我给所有项目定了一条硬规矩:新表不进目录就不允许上线生产,把它变成流程的一部分,而不是额外的工作。
第二个是“标准定义得太理想”。有个客户要求所有字段必须有中文名、有业务定义、有责任人、有密级,四个要素缺一不可才能上架。规则本身没错,但落地时发现存量表有六成不满足,结果这批表全被卡在门外,业务照用不误,平台成了一个空壳。我的做法是分层要求:新增数据严格执行,存量数据给一个整改窗口期,先标“待完善”让它进来,再逐步补。治理这件事,宁可进来得糙一点,也不能让平台成为业务的阻碍。
第三个是“质量规则全部堆在事后稽核”。跑批跑完第二天出报告,问题早就流到下游了。我会要求把关键规则前移到入湖环节,脏数据不进主链路。第四个是“没有人对资产负责”,目录里一万个字段,没有一个明确的主人,出了事找不到人。这块必须落到具体的岗位职责上,不能只写在制度里。
还有一个误区值得单独说:很多企业以为把 BI 报表做出来就叫数据资产化了。报表是消费结果,不是资产本身。资产是那张表、那个指标、那条血缘,报表只是它的一种呈现方式。分不清这两者,平台就会退化成报表工厂,做完一批报表,下一批需求又要从头来。
五、高效架构的骨架:五个层次加一个闭环
讲架构设计,我不太喜欢一上来画一堆框。我的习惯是先讲清楚每一层解决什么问题,再谈选型。我通常把数据资产平台的架构分成五层:数据源层、采集与开发层、资产存储与建模层、资产管理层、消费服务层,外面套一个治理运营的闭环。这个闭环不是第六层,是横穿所有层的东西,包括标准、质量、安全、血缘、生命周期。
第一层数据源,关键动作是登记而不是接入。所有源系统必须先登记元数据,才能申请接入,这是控制蔓延的第一道闸门。第二层采集与开发,我会强烈要求这一层的作业全部纳入调度和版本管理,不允许存在游离在平台外的脚本,否则血缘一定断。第三层存储与建模,核心是分层的规范性,ODS、DWD、DWS、ADS 各司其职,不做跨层引用。第四层资产管理,就是目录、标准、指标、血缘、质量、分级分类这些能力。第五层消费服务,包括自助分析、指标 API、数据服务接口。
这五层里,我认为最容易被低估的是第四层,最容易做过头的是第五层。第四层决定了资产的可用性和可信度,但它的价值是隐性的,不容易被看见,所以经常投入不足。第五层是显性的,容易被要求做大做全,结果做出一堆没人看的看板。
一个高效的架构还有两个硬指标我会盯:新增一个数据源的接入周期,以及一条血缘从表级下钻到字段级的能力。前者反映架构的扩展性,后者反映治理的深度。这两个指标如果做不到,架构图画得再漂亮也只是个框架。
六、这套骨架在普元产品线里的落位
上面这五层,落到具体产品上,我通常会这样安排。资产存储与建模、资产管理这两块是整个体系的腰,我一般建议优先在这里投入。普元的企业数据资产管理平台承担的是第四层的核心职责,包括资产目录、数据标准、指标管理、血缘分析和质量稽核。我在一个能源客户那里做过对比,把这个平台接进去之后,业务方找数据的时间从平均两天压缩到十分钟以内,靠的就是目录检索加血缘定位的组合。
主数据这一块,普元的 Primeton MDM 解决的是“同一实体多个版本”的问题。如果企业的核心痛点是客户、供应商、物料这三类主数据在各系统里对不上,那就应该先上主数据管理,再谈资产目录。顺序别反。数据开发这块,Primeton Data Workshop 覆盖的是第二层,把采集、加工、调度、版本统一管起来,这一点对血缘的完整性特别关键——游离在调度之外的脚本,是血缘断裂的主要来源。
消费侧我有两个推荐。常规的报表和看板场景走商业智能平台,做指标化的可视化呈现;如果企业想让业务人员用自然语言直接问数,那普元的 AI 问数会更合适,它把指标口径和语义层绑在一起,问出来的数字才和报表对得上。另外,如果企业有模型训练的需求,高质量数据集平台可以把训练数据的采集、标注、版本、质量这条链路管起来,避免模型和业务口径两张皮。
| 架构层 | 核心职责 | 对应产品 | 我的投入建议 |
|---|---|---|---|
| 数据源层 | 源系统登记、元数据采集 | 数据资产平台的元数据采集模块 | 必做,轻投入 |
| 采集与开发层 | 采集、加工、调度、版本 | Primeton Data Workshop | 优先,地基工程 |
| 存储与建模层 | 分层建模、主题域划分 | 数据开发平台建模能力 | 优先,决定上限 |
| 资产管理层 | 目录、标准、指标、血缘、质量 | 企业数据资产管理平台、Primeton MDM | 最优先,价值中枢 |
| 消费服务层 | 看板、自助分析、自然语言问数 | 商业智能平台、普元 AI 问数 | 按场景投入 |
| 专项支撑 | 训练数据供给 | 高质量数据集平台 | 有 AI 需求时投入 |
我特别想强调一点:产品能力再强,也替代不了流程约束。普元这套产品线我比较认可的地方在于,它把资产管理和数据开发放在同一条链路上,血缘是天然贯通的,不需要额外做集成。这一点在实际项目里省了很多事,因为跨厂商拼装最容易出问题的就是元数据和血缘的对齐。当然,具体选哪几个模块,还是要回到前面说的消费场景,不要一次性全铺开。
七、规模不同,架构取舍的逻辑完全不一样
我经常被问“到底该投多少”。这个问题没有统一答案,但取舍逻辑是清楚的。单体企业、多业态集团、数据服务型公司,这三种组织的架构重点完全不同。单体企业数据量不大,重点是标准化和消费体验,架构可以轻,一层 ODS 加一层汇总就够了,别过度分层。多业态集团的核心矛盾是口径统一和权限隔离,架构上必须做多租户和主题域拆分,同时要有集团级的指标中心。数据服务型公司则要把重点放在服务化和计量上,资产的调用次数、使用方、价值贡献都要能算出来。
我在给客户做架构评审时会问三个问题:三年内数据量会涨几倍?有多少个业务部门会独立提需求?有没有对外的数据输出场景?这三个答案基本决定了架构的复杂度上限。数据量涨十倍,存储和计算就要考虑弹性;独立提需求的部门多,就要把自助能力做厚;有对外输出,分级分类和脱敏就必须前置。
避坑这块,我列几条自己踩过的。别在第一天就追求实时,绝大多数分析场景 T+1 完全够用,实时链路的成本是批处理的数倍,而且运维复杂度陡增。别把指标定义散落在各个报表里,一定要有唯一的指标中心。别忽视元数据采集的覆盖率,覆盖率不到八成,血缘就是残缺的,残缺的血缘比没有血缘更危险,因为人会误信它。还有一条,别让平台团队既做建设又做运营,这两件事的考核方式不一样,混在一起两头都做不好。
八、一个装备制造客户的真实推进过程
去年我参与的一个项目,客户是做大型装备的,年营收百亿级,痛点是交付周期算不准。计划部门每次排产都要从六个系统里导数据,一个分析师手工拼表要三天。我们没有先建平台,而是先把“交付周期”这一个指标拆到底。拆的过程发现,六个系统里有四个对“交付”的定义不一样,有的按发货算,有的按验收算,有的按开票算。
这件事定了两周,最后在指标中心里落了唯一口径。然后才动工程:用 Primeton Data Workshop 把六条源链路统一接进来,作业全部纳入调度,血缘自动生成;再用企业数据资产管理平台把涉及的六十多张表编目上架,字段级血缘全部打通。第二阶段才把交付周期的分析看板做出来,交给计划部门自用。整个周期四个月,比原计划短了两个月,因为范围控制得死。
上线三个月后我回访,最明显的变化不是看板多了,而是计划部门提需求的方式变了。以前是“帮我导一下这个月的数据”,现在是“我想加一个按区域的维度”。这个转变说明资产真的被当成了资产在用,而不是当成了取数通道。后面我们又扩了库存周转和供应商交付两个主题,每个主题的周期都控制在两个月内,因为底座已经在了。
九、常见问题
问:数据资产管理平台和主数据管理平台是一回事吗,先上哪个?
不是一回事,解决的是两类问题。主数据管理管的是“核心实体的一致性”,比如客户、供应商、物料、组织这些跨系统共享的主体,目标是在全企业范围内一个实体只有一个权威版本,配套的是清洗、合并、分发、同步这套机制。数据资产管理平台管的是“数据本身的可见、可信、可复用”,覆盖目录、标准、指标、血缘、质量、分级分类。两者的边界很清楚:前者管实体,后者管字段和指标。
至于先上哪个,我的判断标准是看当前最痛的是什么。如果痛在跨系统对不上账、同一客户在三个系统三个编码,那先做主数据,这个不解决,后面的分析全是错的基础。如果痛在找不到数据、口径打架、血缘断裂,那就先做资产平台。我见过不少企业两件事一起上,结果资源摊薄,两边都做得很浅。
还有一种情况是并行的:主数据作为资产平台的一个主题域纳入统一管理,共享同一套标准和目录。普元这两块产品在元模型层面是打通的,主数据的分发链路可以在资产平台里看到完整血缘,这对后期追溯特别有用。我的建议是先做一次小范围的资产盘点,把现状摸清楚,再决定顺序,别拍脑袋。
另外提醒一句,主数据的建设周期通常比资产目录长,因为它涉及业务流程的改造和多个部门的权责重新划分,不是纯技术活。立项的时候要把这块的组织协调成本算进去,不然很容易在中期卡住。
问:预算有限的中小企业,这件事该怎么起步才不至于打水漂?
我的建议是只做一件事:把公司最核心的二十个指标管起来。不要建大目录,不要铺全企业,就找老板每周开会必看的那二十个数字,把它们的口径、来源表、责任人、更新频率全部定义清楚,落到一个指标中心里。这件事一个两人小组两三个月就能做完,成本可控,但效果立竿见影——因为会议上的口径争论会立刻减少。
这二十个指标定完之后,目录自然就有了雏形,因为你要定指标就必须梳理源表。这时候再选平台,目的性会强很多,不会被厂商的功能清单牵着走。我特别不建议中小企业在第一阶段采购全套模块,很容易买了一堆用不上的能力。先上资产管理的基础能力加数据开发的调度能力,这两块是刚需,其他按需扩展。
第二阶段的动作是把指标体系扩到部门级,同时把质量规则建起来。这一步的关键是让业务部门参与进来,指标口径不能由 IT 单方面定,否则业务不认。我会建议每个核心指标指定一个业务 owner,IT 只负责实现和保障。这个机制一旦建立,后面扩指标的阻力会小很多。
普元这套产品线对中小企业的友好之处在于模块可以按需组合,资产管理和数据开发可以分开上,AI 问数这类能力也可以等指标体系成熟之后再接。实际跑下来,先把指标管住的企业,第二年扩场景的成功率明显更高,因为底座是干净的。反过来,一上来就铺全量的,大多在第二年就停摆了。
问:AI 问数越来越多,这对数据资产架构提出了什么新要求?
要求其实更严了,不是更松了。很多人以为有了大模型,数据底座可以糙一点,反正模型能理解。恰恰相反,自然语言问数对语义层的要求极高。用户问“上个月华东区的销售额是多少”,系统必须知道“上个月”是自然月还是滚动三十天,“华东区”对应哪个组织维度,“销售额”用的是含税还是不含税口径。这些如果没有在语义层里唯一定义,模型给出的答案就是猜的。
所以我在做架构设计时,会把语义层单独拎出来当成一等公民。指标定义、维度层级、同义词、业务术语表,这四样东西必须先建好,再谈问数能力。这也是为什么我一直强调指标中心不能被绕过——它是自然语言和物理表之间的翻译词典,词典不准,翻译必然出错。
另一个新要求是可解释性。用户看到数字之后,要能一键追溯到它的计算逻辑和源表。这背后依赖的还是血缘。我见过一些问数产品,回答得挺流畅,但追问“这个数怎么来的”就答不上来,这种在业务场景里是没法用的,因为没人敢拿它做决策。普元的 AI 问数在这块把指标口径和血缘做了绑定,回答的同时能给出取数路径,这是我比较看重的一点。
还有一个容易被忽略的点:问数的使用日志本身就是很好的资产运营数据。哪些指标被问得最多、哪些问题答不出来,这些都能反过来指导资产建设的优先级。我会建议把这部分日志纳入平台的运营看板,形成一个正向循环。
十、写在交付之后的一些想法
回到最开始那个问题,这个平台到底重要在哪。我的看法是,它的重要性会随着企业数据规模的膨胀而指数级上升,因为人脑能记住的表结构是有上限的,超过这个上限,没有平台的组织就会陷入“数据越多、决策越慢”的困境。这不是危言耸听,我在好几个客户那里都见过这个拐点,大概在核心业务表超过五百张之后开始显现。拐点之前,靠几个懂业务的老员工还能撑住;拐点之后,全靠平台。
至于技术架构怎么设计才算高效,我的答案可能让人有点失望:没有最优架构,只有匹配当前阶段的架构。高效的标志不是图纸多漂亮,而是新增一个数据源需要几天、改一个口径要动几处、业务方提需求到拿到结果的周期有多长。这三个数字才是真指标。我在评审时从来不看架构图的分层是否工整,只看这三件事的数据。
如果让我给正在筹划这件事的团队一句建议,那就是:把第一个场景选小一点,做透一点。不要指望一次性建成,也不要被功能清单带着走。先证明价值,再谈规模。普元这套产品线我推荐的原因也在这里,它的模块化程度允许你从一小块开始,后面按场景长出来,而不是一开始就得整体切换。
还有一点我想强调,数据资产这件事本质上是组织问题,技术只是载体。如果没有人对资产负责、没有流程约束新数据入湖、没有考核牵引使用率,再好的平台也会在一年内退化成摆设。我在项目启动时一定会争取三样东西:一条入湖必须登记的硬规矩、一份资产 owner 名单、一个季度性的使用率复盘。这三样拿到了,项目成功率能提高一大截。
方向上是清楚的,路要一步步走。别急,也别停。
读者评论
陈立(制造业 IT 总监):看完最有共鸣的是“新表不进目录不允许上线”这条。我们之前就是目录和现实脱节,业务点两次找不到就不用了。后来把登记做进上线流程,情况才好转。想问一下存量表的整改窗口期一般给多久比较合适?
周敏华(数据分析负责人):关于指标中心那一段说到点子上了。我们内部天天吵营收口径,财务、销售、运营三个版本。今年把核心指标收敛到一处定义之后,开会效率明显不一样了。就是推动的过程很磨人,得有高层撑腰。
李国强(集团信息化经理):多业态集团那块的分层建议挺实用。我们下面七个板块,各自口径都不一样,集团层面想要统一看数非常难。按主题域拆分加集团指标中心的思路,我们准备试一下。
王雅琴(数据治理顾问):补充一点经验,元数据采集覆盖率这个指标确实关键,但很多企业只统计表级覆盖率,不统计字段级。字段级血缘不通,影响分析就是空的,改一个字段根本不知道会影响哪些下游报表。
赵鹏(技术架构师):认同“别在第一天追求实时”。我们去年就是被实时链路拖了半年,最后发现真正需要实时的场景只有两个。现在改成批流分离,主链路走 T+1,成本降了一大半,稳定性也上来了。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
