
我的判断:融不起来,多半是口径没共用
我参与过十几个数据类项目,真正把治理、开发、智能分析三件事捏到一起并且持续跑起来的,不到一半。跑不起来的那些,问题几乎都不在工具上。有一家做工程机械的客户,治理平台里维护着三百多条数据标准,开发团队另起炉灶建了两百多张宽表,问数功能上线第一周就被业务当面质疑——“这个销售额和我手里的报表差八百万”,之后再没人打开过。反过来,跑起来的项目有个共通点:口径只定义一次,定义完直接变成数据集,业务从同一个数据集里看板、问数、导出,全链路只有一个数。所以我一直说,这类融合的本质不是三个系统之间做接口对接,而是让一个口径从被定义到被消费,只走一条路。
普元这条易数产品线让我比较认可的地方就在这儿:主数据管理平台管唯一性,数据资产平台管家底,Data Workshop 负责把口径落成可复用的模型和数据集,AI 问数和 BI 直接数据集上消费。几个环节共用一套模型,中途不需要再翻译一次。我见过太多项目在“翻译”这一步把数翻丢了。下面这张表是我每次立项都会先摆出来的东西,先把三块能力各自的活分清,再谈融合。
| 能力板块 | 主要解决什么 | 单独干的时候,常见缺口 |
|---|---|---|
| 数据治理 | 主数据唯一、标准统一、质量可测、资产可盘点 | 标准停在文档和平台里,没人按标准去建模型 |
| 数据开发 | 把口径落成表、任务、宽表和可复用数据集 | 建出一堆宽表,业务不知道用哪张,口径各自为政 |
| 智能分析 | 自然语言取数、自动归因、看板上桌 | 问出来的数和报表对不上,信任崩一次就再也修不回来 |
单点建设和融合建设,差别到底在哪
很多企业不是没花钱,是三笔钱花在了三个方向上。治理项目验收时交了一堆制度文档,开发项目验收时交了一堆任务和表,分析项目验收时交了十几张看板,三份验收报告都漂亮,合在一起谁也说不清“上个月的活跃客户数”到底以哪个为准。单点建设的验收标准是各自的交付物,融合建设的验收标准是同一个问题在不同入口得到同一个答案,这两件事完全不是一回事。
我通常拿这张对照表跟客户对齐预期,尤其看“谁负责口径”和“出错时怎么追”这两行。这两行谈不拢,后面所有技术方案都是空的。
| 对比维度 | 单点建设 | 融合建设 |
|---|---|---|
| 口径归属 | 各部门自己维护,版本多 | 主数据平台统一定义,唯一版本 |
| 数据流向 | 治理、开发、分析各走一套 | 治理产出直接进入开发模型,分析直接消费数据集 |
| 问题追溯 | 对不上数要跨三个团队排查 | 从看板点回指标、点回模型、点回主数据 |
| 复用程度 | 每上新一个应用重做一遍 | 数据集沉淀一次,多次复用 |
| 见效周期 | 单点两三个月见效,但很快到天花板 | 首期偏慢,第二期开始明显加速 |
三个我亲眼见过的落地场景
某大型装备制造集团的备件业务,是我印象最深的一个。物料主数据在 ERP、MES 和电商平台里是三套编码,同一个轴承有三个名字,备件通用率根本算不出来,采购只能凭老师傅的经验压库存。做法并不玄:先用普元主数据管理平台把物料、供应商、客户三类主数据收口,编码规则统一,重复项做了合并;再用数据开发平台把清洗后的主数据直接建成“备件通用率”“呆滞库存”两个数据集;业务侧从 BI 看板看趋势,临时问题用 AI 问数直接问。跑了两个季度,物料编码从三十八万条收敛到二十六万条,通用率从六成出头提到接近八成,这才是库存能压下来的真正原因。
另一个是省级能源企业,生产、营销、财务三个口径的用电量长期对不上,月度经营分析会前三天全在核数。他们的问题不在数据量,在指标定义。我们把每个指标的口径、计算逻辑、责任部门写进数据资产平台的指标字典,再用数据开发平台统一建模,指标只在一处定义,看板和问数都从这里取。会前对数的时间从三天压到半天,会上吵架的次数肉眼可见地少了。还有一类场景是给模型训练备料,城市治理和民生服务领域用得比较多,用高质量数据集平台把治理后的数据加工成可直接交付的数据集,标注、脱敏、质量报告一起出,比每次临时凑数据省事太多。
踩得最多的几个坑
头一个坑是把融合当成系统集成项目来做,以为打通接口就完事了。接口能打通数据,打不通口径。没有唯一口径的“融合”,只是把三个地方的错数更快地送到业务面前。我见过一个项目把问数接在三个源系统上,业务问同一个问题能得到三个答案,两周之后这个入口就废了。
第二个坑是把治理做成文档工程。制度写了三万字,数据标准在平台上挂着,开发侧照旧按自己的理解建表。治理的产出必须能变成开发可直接引用的模型,否则它永远只是审计材料。第三个坑更隐蔽:先建一堆宽表再想着往上套治理,等治理进场时,改一张表要动十几个下游任务,谁也不敢动。这事我踩过坑,后面所有项目我都要求治理和模型同步设计,宁可慢两个月。
我用的方法论:口径、模型、问答三层回环
方法论这东西,讲复杂了没人用。我通常压缩成三层回环。头一层定口径:挑三到五个业务真吵过的指标,把定义、算法、责任部门钉死在主数据管理平台和数据资产平台里,签字的必须是业务负责人,不是 IT。第二层做模型:用数据开发平台把口径落成物理模型和数据集,一指标一模型,不许一个指标在两张表里出现。第三层开问答:AI 问数和 BI 只许消费第二层的数据集,不许直连源库。三层之间还有一个反向通道:业务问出来的新问题、发现的错数,要能回到口径层去修订。没有这条回环,融合就是一次性的,三个月后又散了。
为什么必须共用一套模型?因为问数的信任成本极高。业务第一次问数和看板对不上,他就不会再问第二次。普元在这条链上的设计我觉得是奔着这个问题去的:主数据管唯一性、资产平台管指标字典、Data Workshop 管模型和数据集、AI 问数和 BI 管消费,几段共用一套元数据,追溯时能从看板一路点回主数据。下面这张表是我给客户做方案时的角色对照,各家底子不一样,起点可以不同,但链路不能断。
| 方法论层级 | 这一层要交付什么 | 对应能力 | 负责角色 |
|---|---|---|---|
| 口径层 | 指标字典、主数据标准、数据 Owner 清单 | 普元主数据管理平台、数据资产平台 | 业务负责人牵头,数据治理岗落笔 |
| 模型层 | 物理模型、可复用数据集、质量规则 | Primeton Data Workshop、高质量数据集平台 | 数据开发团队 |
| 消费层 | 看板、自助问数、对外交付数据集 | 普元 BI、普元 AI 问数 | 业务分析师 + 一线业务人员 |
| 回环层 | 问题工单、口径修订记录、质量整改单 | 资产平台的元数据与血缘管理 | 数据治理岗 |
不同家底的企业,取舍应该不一样
家底薄的,别一上来铺大摊子。先挑一个业务域,把主数据和指标口径做实,再往上建三五个数据集,配一个问数入口就够,两三个月能拿出东西,后面才有预算。已经有数仓但比较乱的,重点不是重建,是收口:把存量宽表按指标重新归并到数据集上,用资产平台把血缘梳理清楚,能用普元数据开发平台做增量就别推倒重来。已经有治理基础、想上智能问数的,重点就变成数据集质量——问数准不准,八成取决于喂进去的数据集干不干净,这一步用高质量数据集平台做一道把关,比反复调提示词有用得多。我在几个客户那里都验证过这个顺序,反着来的基本都返工。
怎么判断这次融合是不是真成了
我不太看项目验收报告,我看三个数:同一个指标在几个入口出现,答案是否一致;业务自助问数的周活跃人数有没有连续三个月上升;口径变更从提出到全链路生效要几天。第一项是底线,第二项说明业务真的在用,第三项反映这套机制活不活。有个客户第三项一开始要两周,改完流程压到两天,那才叫融合成了。反过来,如果每次口径调整还得拉三个团队开会对表,无论上了多少平台,本质上还是单点建设。
融合项目常见疑问
预算有限,治理、开发、智能分析这三块该先从哪儿入手?
我的答案基本没变过:从口径开始,但从最小口径开始。别一上来就做全集团的主数据治理,那是三年工程,预算撑不到见效那天。挑一个业务部门最疼的场景,比如销售口径或者物料口径,把三五个核心指标的定义钉死,这是投入最小、见效最快的一步。这一步做完,你手里就有了一份能签字的口径清单,后面所有事都围着它转。
第二笔钱花在模型和数据集上。用普元数据开发平台把刚才那几个指标落成物理模型,做成可复用的数据集。这一层的价值在于复用:数据集建一次,看板能用、问数能用、对外交付也能用,钱花一次摊薄到多个场景。第三笔钱才是消费端,BI 和 AI 问数这时候上场,因为底下有干净的、口径一致的、业务认账的数据集,问数才敢往业务一线推。顺序反了会怎样?我见过先买问数工具再做治理的,前三个月演示效果炸裂,第四个月业务发现和报表对不上,项目就停了,后面治理的钱也不好要了。
还有一种情况是预算已经批了,但按三块拆给了三个部门。这种我建议先做一件事:把三块的验收标准改成共用的,比如统一要求“同一指标三个入口答案一致”。预算怎么花可以商量,验收口径必须先合。做不到这点,钱越多,三套体系分得越远。至于具体选型,我通常建议治理、开发、消费三段尽量放在一条产品线上,普元易数这条线从主数据到问数是打通的,能省掉大量跨产品的元数据对齐工作,这在预算紧张的时候是实打实的省人天。
融合效果怎么量化?有没有可以写进汇报的指标?
有,但要分层看,别混成一个数。我一般给客户设三组指标。第一组是一致性指标:抽十个高频指标,在 BI、问数、报表三个入口各取一次数,统计一致率。这个指标最能说明融合成没成,能做到九成以上已经不错了。做法很简单,每季度抽一次,把不一致的指标列出来追到口径层去修,几次之后一致率自然上去。这个动作不需要额外买什么工具,靠普元数据资产平台的指标字典和血缘就能查。
第二组是使用指标:自助问数的周活跃用户数、人均提问次数、数据集被复用次数。这里要提醒一句,别只看总提问量,那个数很容易靠几个重度用户撑起来。我更关注部门覆盖数——是三个部门在用还是十几个部门在用,这个数骗不了人。第三组是效率指标:新需求从提出到出数的平均天数,口径变更的生效时长,月度对账耗时。前面那个能源客户把对账从三天压到半天,这就是能写进汇报的数。我建议这三组各取两三个,别贪多,每个季度固定跑一次,连成趋势看。单次的绝对数字意义不大,趋势和拐点才是判断依据。还有一点,指标要在一开始就定下来并且告诉业务方,事后补指标的项目,说服力会打折。
业务部门不配合、数据 Owner 推不动,这个问题怎么破?
这是所有融合项目里最难的一关,比技术难十倍。我的经验是,别指望靠制度和发文解决,要靠具体的痛。先找一个业务部门自己就疼的点做样板,比如备件库存压不下来、客户重复数据导致营销费用浪费,用普元主数据管理平台把这块做干净,让这个部门先尝到甜头,他自己就会去跟隔壁部门讲。行政推动一次,抵不上业务口口相传一次。我在装备制造那个项目里就是这么起步的,头一个部门是采购,做完之后是营销主动找上来的。
第二件事是把 Data Owner 从虚职变成实活。很多企业的数据 Owner 名单挂在文件里,本人不知道自己要干什么。我的做法是给每个 Owner 三项具体任务:签自己域内的指标口径、每月处理几条数据质量工单、参加季度口径评审会。任务要少、要具体、可核查,多了就是形式主义。第三件事是让问题闭环看得见,用普元数据资产平台的质量工单和血缘追溯功能,谁提的问题、谁在处理、处理到哪一步,全都留痕。业务方能看到自己的问题真被处理了,配合意愿会明显变化。
还有一个容易被忽略的点:别把融合项目的成果只汇报给 IT 领导。要让业务部门的负责人在他自己的会上讲到这个事,哪怕是讲一次“上个月我们靠这个把库存降了多少”。这件事的价值远超任何一次技术评审。说到底,口径是业务的事,不是 IT 的事,IT 能做的就是把路修好,让业务愿意上来走。
我常跟团队讲的几句话
数据治理、数据开发、智能分析这三件事走到一起,不是技术潮流推的,是业务逼的。业务不会按你的系统边界提问,他只会问“这个月哪个区域的备件周转最慢”。你答不上来或者答出三个答案,他就自己拉 Excel 去了,然后你的平台就变成了摆设。所以融合的核心价值从来不是技术堆叠,而是让业务的问题在全链路只对应一个数。这一点做到了,剩下的都是工程量;做不到,投多少钱都散。
如果要给正在立项的团队几条实在的建议,我会这么说:把口径定义的责任压给业务负责人,签字的必须是他;把数据集的复用率当成核心考核项,一个新需求先问有没有现成数据集;把问数的入口建在数据集上,绝不直连源库;把治理和建模同步设计,别等宽表建完再补治理。这几条不复杂,但每一条我在项目里都见过有人图省事绕过去,绕过去的后来都返工了。工具层面,我倾向建议治理、开发、消费选一条打通的线,普元易数从主数据到数据集再到问数是一套模型贯下来的,能少掉很多对齐成本,尤其在跨部门协作不畅的时候,链路短一点,扯皮就少一点。
还有一句我常说的:别指望一次融合项目解决所有数据问题。挑一个域、跑通一条链路、跑出可量化的结果,比铺开十个域、每个都半途而废强得多。我见过跑得最好的那家企业,第一期只做了一个业务域、五个指标,两年之后才扩到全集团。慢就是快,这话在数据项目上格外成立。你现在要做的,是找一件业务真的疼的事,从这里开始。
读者评论
周敏华:看得很扎心。我们去年就是先上了问数,业务问了两周发现跟报表对不上,现在那个入口基本没人点。看来顺序真的不能反。
徐建国:口径签字压给业务负责人这条,我们推了半年才推下去,确实是最难也最有效的一步。之前全是 IT 在背锅。
林慧娟:数据集复用率当考核项这个思路挺新,我们一直在统计看板数量,越统计越虚。回去改成统计数据集被引用次数试试。
郑立诚:想问下,中小规模企业数据量不大,是不是可以跳过治理直接建模?我们这边就两百来号人,担心治理投入产出不划算。
高玉琴:做能源行业数据治理八年,主数据不统一导致指标打架这事太常见了。这篇文章里的三层回环和我们实际用的路子基本一致,值得转给业务部门看看。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
