一文讲透数据治理失败的原因与对策,你是否也遇到类似问题?如何避免数据治理中的常见陷阱?

一、先把我的判断摆出来这些年我跟过十几个数据治理相关的项目,也旁观过更多做了一半就停掉的。真要说这类项目为什么失败,我的答案往往让人不太舒服:问题极少出在工具选型上,出在“谁对这张表的准确性负责”这件事从来没被写清楚。甲方立项的时候写得很漂亮,组织架构图上有数据治理委员会,有数据 Owner,有数据

一、先把我的判断摆出来

数据治理项目失败原因分析

这些年我跟过十几个数据治理相关的项目,也旁观过更多做了一半就停掉的。真要说这类项目为什么失败,我的答案往往让人不太舒服:问题极少出在工具选型上,出在“谁对这张表的准确性负责”这件事从来没被写清楚。甲方立项的时候写得很漂亮,组织架构图上有数据治理委员会,有数据 Owner,有数据 Steward,落到执行层,那个 Owner 其实只是开了三次会、签了一份名单。等到主数据真的冲突了,没人拍板;等到指标口径打架了,还是 IT 部门在两边劝。这种局面下,买再贵的平台也只是把混乱搬到线上。

我判断一个数据治理项目有没有戏,通常先看两件事。第一件,主数据有没有明确的业务归口人,这个人是不是真的能拍板,而不是挂名的科长。第二件,关键指标的口径能不能一句话说清出处——不是“按财务口径”,而是具体到取哪张表、哪个字段、由谁在什么时点确认。这两件事没有答案,后面所有的投入都是在给失败追加预算。反过来,这两件事有了答案,工具选型的容错空间会大很多。

普元的主数据管理平台、数据资产平台这套东西我确实经常用,也比较认可,但它解决的是“把已经达成共识的标准落到系统里、把变更管起来、把责任链显性化”,它解决不了“业务部门心里不认这个标准”。这个边界如果没想清楚,项目就会在第三个月出现典型的僵局:系统建好了,业务不用,理由是“跟我的实际业务对不上”。说白了,治理失败从来不是技术故障,是组织契约没签成。

数据治理的处境变了:以前问要不要做,现在问做了为什么没效果

五年前我参加的治理项目,会上讨论最多的还是“有没有必要”。现在几乎没人问这个了,大家都在问另一个问题:前两年投的钱为什么没看见东西。我见过一家企业,两期项目做完了,数据标准文档堆了半米高,业务部门该拉 Excel 还是拉 Excel。也见过做得比较顺的,第二年就能拿治理成果去支撑监管报送和经营分析。差别不在预算规模,在治理这件事有没有被当成一条长期运行的机制。

我把常见的三类场景整理成了一张表,你可以对照看看自己更接近哪一种。

典型场景 常见起手式 一年后我能观察到的状态
集团下多套系统并存,客户、物料、供应商编码对不上 先明确主数据归口部门,再上主数据管理平台,边治理边接入新系统 口径逐步收敛,新系统上线前有标准可依,追溯能查到责任人
经营分析会上报表互相打架,谁都不服谁 直接上 BI,先把看板做漂亮 如果没有先定指标定义和责任人,半年后新一批报表照样打架
上级要求做数据资产盘点,要交目录 拉清单、做目录、编文档 目录交付即失效,没人维护,第二年重新盘一遍

第二行那个场景我踩过坑。当时我以为把报表做出来,争议自然就消解了,实际跑下来发现完全相反——报表越好看,口径争议越尖锐,因为所有人都开始拿它当依据。BI 是放大器,它放大的是口径共识,也放大口径分歧。后来我调整了顺序,先花两个月把核心指标的 owner 和定义敲定,再动看板,进度慢了,但返工少了。

两条路径的差别,我习惯用一张表说清楚

失败的项目和跑通的项目,表面上做的事情差不多:都建标准、都做清洗、都上系统。真正分开它们的是路径选择——是把它做成一个项目,还是做成一套机制。这两者的差别我列在下面这张表里,很多客户看完会沉默一会儿。

对比维度 项目型治理 机制型治理
发起方式 IT 部门或数据部门牵头立项 业务一把手签发,业务部门共同署名
责任归属 数据团队兜底 每个域有明确的业务 Owner,考核进部门指标
标准维护 项目期集中编写,交付后封存 有变更流程,标准随业务演进持续更新
成果呈现 文档、报告、验收单 业务侧能直接感知的报表、查询、报送效率
组织变动后 换一任领导基本归零 流程和平台承载,人换了机制还在

项目型治理交付的是文档,机制型治理交付的是别人愿意持续使用的流程。这句话我在评审会上说过很多次。判断标准其实很简单:项目结束半年后,那张标准表还有没有人在改?如果没有,前面那些工作就是在做一次性的数据美容。

我通常会建议客户在立项阶段就明确一件事——把治理的考核指标挂到业务部门的年度目标上,而不是挂在信息中心。这件事听起来是管理动作,跟技术无关,但它决定后面所有技术投入能不能产生复利。普元数据资产平台这类工具之所以在机制型项目里价值更明显,是因为它把“谁定义了、谁改了、谁在用”这些过程留痕了,责任链能被看见,而不只是存在一份 Word 里。

失败反复出在这五个地方

第一个,没人真正对数据负责。名单上有名字,出了问题没人认。我的做法是把责任落到具体的字段组,而不是落到部门,部门是虚的,人是实的。

第二个,标准跟业务两张皮。IT 按建模规范写标准,业务看不懂也不想看。我见过一份物料分类标准,二十三级,编写的人自己都记不全。实际跑下来,业务只认前三层,后面全是摆设。标准要能被一线用起来,深度得控制在他们愿意记的范围内。

第三个,只治存量不管增量。历史数据清洗了三个月,新系统上线继续产生脏数据,半年后回到原点。增量入口不管住,存量治理就是无底洞。这一点我在主数据项目里体会很深,源头系统的录入校验不加强,后面清洗多少次都是白干。

第四个,成果不可见。治理做了两年,业务没感觉。原因往往是治理团队一直在做后台工作,没把成果翻译成业务语言。哪怕是“供应商主数据统一后,采购对账周期从五天缩到两天”这样一个数字,也比十页方法论有用。

第五个,人一换就断。这是最伤的一种,也是机制型治理要解决的核心。凡是依赖某个能人推动的治理,寿命基本等于这个人的任期。

这五条不是并列关系,前两条是因,后三条是果。我在诊断项目的时候,通常从第一条开始问,问完基本就能判断后面的走向。

几个我反复纠正的误区

先说一个最常见的:把治理等同于数据清洗。清洗是一次性的体力活,治理是持续性的规则维护,两者不在一个层面上。我见过团队把 80% 的预算花在历史数据清洗上,结果新数据进来照样脏。正确的顺序是先立规则、再管入口、后清存量,顺序颠倒就是烧钱。

第二个误区是先建平台再想治理逻辑。有些项目启动会上就在讨论买哪家的产品,标准还没影。我的建议是先把三个域的痛点讲清楚,再谈工具能力。普元数据开发平台这类东西我在项目里用得不少,它在数据加工链路、任务调度、质量校验上确实能省很多事,但前提是你知道自己要加工什么、校验什么,平台本身不会替你想清楚业务规则。

第三个误区是把指标口径交给 IT 定。技术团队能定义字段,定义不了业务含义。毛利到底含不含运费,这事儿 IT 拍不了板。我通常要求每个核心指标都有业务侧的签字确认,会上定不下来就往上抬,抬到能定的层级为止。

第四个误区是把治理做成运动。搞三个月攻坚,成绩显著,然后团队解散。半年后数据质量曲线原路返回。治理的成果不是攻坚出来的,是日常运转出来的。

能力怎么对上问题:我常用的一张对照表

工具选型这件事,我的思路是先看问题属于哪一类,再看能力怎么匹配。下面这张表是我在方案讨论时最常画的一张,横向是治理中真实会遇到的卡点,纵向是我认为对应的能力组合。普元这套产品线在这几类问题上的覆盖面比较完整,我按实际使用感受做了对应。

治理卡点 需要的能力 我会优先考虑的产品方向
客户、物料、供应商多源冲突,编码不统一 主数据建模、清洗合并、分发订阅、变更留痕 普元主数据管理平台(Primeton MDM)
数据在哪儿、谁在用、质量如何说不清 资产目录、血缘追踪、质量规则与度量 普元数据资产平台
数据加工链路散落,口径在加工环节就走样 统一开发、任务调度、质量校验前置 Primeton Data Workshop
业务看不懂数,报表解释成本高 指标口径统一、自助分析、可视化 普元商业智能平台(BI)
业务想问数还要排队找 IT 自然语言问数、指标语义层 普元 AI 问数(Primeton AI 问数)
要做模型训练,但数据质量撑不住 数据集加工、标注与质量评估 高质量数据集平台

这张表的价值不在于对应关系,在于提醒我别用一类工具去解另一类问题。我见过拿 BI 去解决主数据冲突的项目,做出来的看板越精确,冲突暴露得越尴尬。也见过只做资产目录、不做开发治理的项目,目录里的数据质量没人担保,盘点变成走过场。

还有一点值得提。普元数据资产平台和主数据平台之间不是替代关系,我在集团客户那里通常是配合着上:主数据管核心实体的唯一性和分发,资产平台管全域数据的可见性和质量度量。先把核心实体管住,再谈全域资产,这个顺序我基本没变过。至于 AI 问数,我的建议是放在指标口径已经收敛之后再用,否则它只是把口径混乱加速暴露给更多人。

不同阶段该怎么取舍

预算有限的中型公司,我一般建议先做一件事:选一个痛感最强的域,把主数据管起来。选域的标准不是哪个重要,是哪个业务方最愿意配合、最能出成绩。做完一个域,让其他部门看到效果,再往下推,比一上来铺开十个域靠谱得多。普元主数据管理平台在这类单域切入的场景里落地相对快,模型配置和分发规则调整不需要写太多代码,业务方参与门槛低,这点对中型团队挺关键。

集团型客户的情况复杂一些。多法人、多业态、多系统,一刀切的标准根本落不下去。我的做法是分层:集团层管标准和编码规则,子公司层管具体数据质量,中间用分发订阅打通。集团治理的难点不是技术,是权限和利益,标准定得越细,反弹越大。所以我会把第一版标准做得比理想状态粗一档,先让大家接受,后面再逐步收窄。

已经做过一轮治理、效果不理想的客户,我通常不建议推倒重来。先做诊断:标准还在不在用、谁在维护、上次失败卡在哪个环节。多数情况下,之前做的建模和清洗工作是有价值的,缺的是责任机制和入口管控,补上这两块就能盘活。这种场景里普元数据开发平台能把已有的加工逻辑收进来统一调度,避免再建一套并行链路,这块省下来的维护成本不小。

还有一个取舍点我经常会提醒:不要在一个项目里同时推进主数据、资产盘点、指标治理和 AI 应用。四件事同时干,资源摊薄,每件都做不透。治理的节奏感比治理的覆盖面更重要。我通常按“一个核心域 + 一条指标线”的配比来排期,一年下来能稳稳拿下,第二年再扩。

一个制造业客户的真实过程

去年接触的一家装备制造企业,典型症状:销售、生产、财务三套系统里同一个客户有多个编码,月度经营会经常为“这个客户到底贡献多少收入”吵起来。前一年他们做过一次数据清洗,投入不小,半年后问题复发。我进场时先问了一个问题:客户主数据的唯一性,谁负责?会上没人接话,这就已经说明问题了。

后面做的动作其实不复杂。先把客户、物料两个核心域的归口部门定下来,销售总监和供应链总监各自签字;再定编码规则和准入校验,新客户录入必须有统一社会信用代码校验;然后才是上普元主数据管理平台做建模、去重合并和分发订阅,让三套系统都从同一个源取数。整个周期四个多月,中间最难的一段不是技术实现,是让销售团队接受“不能自己建客户档案”这条规则,磨了三周。

效果上,客户对账周期从原来平均四天多缩到两天以内,月度经营会的争议从“数据对不对”转向“业务怎么办”,这个转变我认为比任何指标都值钱。治理成功的标志不是数据变干净了,是会议议题变了。

后来他们的信息中心主任跟我说了一句话,我一直记着:“以前我们做治理,是在给别人擦桌子;现在是把桌子归谁管说清楚了。”还有个业务经理的原话更直白:“系统是次要的,主要是终于有人能拍板了。”这两句话我觉得比我写十页方案都实在。

关于数据治理的常见疑问

问:数据治理一定要先上平台吗?预算有限的团队该怎么起步?

我的答案是不一定,但要看你怎么定义“上平台”。如果指的是买一套完整的产品套件、做全面部署,那完全没必要一开始就干这个。如果指的是有一个能承载标准、能留痕、能被多方共同使用的载体,那我倾向于尽早有,因为纯靠 Excel 和文档维护标准,超过三个部门参与就会失控——版本满天飞,谁改的说不清,出了问题互相推。

预算有限的团队,我通常建议这么起步。先圈定一个核心域,比如客户或者物料,把编码规则、准入条件、归口责任人这三件事在纸面上定死,这一步不花钱,但最费精力。定完之后,找一个轻量的落地方式,普元主数据管理平台在这类单域场景里部署门槛不算高,模型配置和分发规则基本靠配置完成,业务人员也能参与,不需要专门组建开发团队去支撑。等这个域跑顺了、业务方认可了,再往第二个域扩。

有一个坑我得提醒:别为了省钱跳过规则设计直接上系统。我见过团队上来就配模型,配到一半发现分类逻辑业务根本不认,推倒重来,成本翻倍。规则设计的投入省不掉,只会在后面以更高的代价补回来。另外,起步阶段不要追求覆盖全,宁可选一个小切口做出可见效果,因为治理这件事在组织里能不能活下去,取决于第一批使用者愿不愿意替它说话。有了口碑,后面的预算和配合度都会好谈很多。

问:主数据管理和数据资产平台,会不会是重复建设?

这个问题我在方案评审会上被问过很多次。结论是它们解决的不是一件事,但如果你的组织还没到那个阶段,确实可以先只上一个。主数据管理管的是核心实体的唯一性和权威性——客户、物料、供应商、组织机构这些,谁说了算、怎么分发、变更怎么留痕。数据资产平台管的是全域数据的可见性、可理解性和质量度量——有什么数据、谁在用、血缘怎么走、质量规则有没有达标。前者是收敛,后者是普查。

什么情况下该先上主数据?我的判断标准是:如果你的痛点是“同一个东西在不同系统里叫法不一样、导致业务协同出错”,那就先做主数据,这是根上的问题。什么情况下该先上资产平台?如果痛点是“数据找不到、不敢用、不知道质量怎么样”,尤其是监管报送或者内部审计有明确要求,那先做资产盘点更合适。

规模到了一定程度,两者必须配合。我在集团项目里的常见做法是:主数据平台作为权威源,把核心实体分发到各业务系统;资产平台把分发结果和各系统的使用情况纳入目录,做质量和血缘的持续监测。主数据解决“以谁为准”,资产平台解决“我能不能信”,缺一头都不完整。普元这两条产品线在元数据和分发链路上是打通的,实际部署时不用额外做太多集成工作,这一点在项目周期紧张的时候很省心。但我也得说清楚,如果组织连主数据的归口部门都定不下来,先上资产平台只会得到一份更精确的“混乱地图”。

问:治理做了一两年,业务还是不用数据,问题可能出在哪?

这种情况我见得不少,而且原因往往不在数据本身。业务不用数据,通常有三个层次的原因,得一层层往下查。最表层的,是拿不到。业务想看的东西要提需求、排队、等两周,等到的时候业务节奏早过了。这一层用自助分析能缓解,普元商业智能平台在指标口径统一之后,业务侧自己做钻取和组合分析的门槛不高,把等待时间从两周压到几分钟,使用率会明显变化。

中间一层,是看懂了但不信。同一张报表,业务心里有自己的数,两边对不上,久而久之就不看了。这一层要回到指标治理,把定义、取数逻辑、更新时点全部公开,让业务能自己追溯。我通常要求在报表上能点开看口径说明,这一条看起来小,实际对信任建立很关键。再往深一层,是看懂了也信,但跟他的决策无关。这一层最麻烦,属于治理选题的问题——做了很多业务不关心的指标。

我的建议是先做一次使用侧的回访,别问“你觉得数据质量怎么样”,要问“上个月你做哪个决策的时候想找数但没找到”。问十个业务骨干,能问出真实答案。治理的选题应该从决策场景倒推,而不是从数据域正推。等场景清楚了,再用普元 AI 问数这类工具降低取数门槛,让业务用自然语言就能问到想要的口径,这时候工具才真正发挥作用。顺序反了,再好的工具也只是摆设。我在一个零售客户那里就是这么做的,先定十个高频决策场景,再围绕这十个场景补齐数据和口径,半年后日活用户翻了四倍。

写到这,我想留给你的几个思考方向

数据治理这件事,我越做越觉得它的重心不在技术侧。技术侧的问题是确定的——建模、清洗、分发、血缘、质量规则,这些问题都有成熟解法和成熟产品,普元这套产品线在其中的覆盖度我认为是够用的。真正不确定的是组织侧:谁愿意为一条脏数据承担责任,谁愿意放弃自己建一套编码的便利,谁愿意在考核表上给治理留一行。这些问题的答案决定项目能不能活过第二年。

如果你正准备启动或者重启一个治理项目,我建议先做三件事,都不用花钱。第一,把最近半年因为数据问题开过的会列出来,看看争议集中在哪几个实体和哪几个指标,这就是你的切入点。第二,找到这几个实体背后的业务负责人,当面问一句“这个数据以谁为准”,看他怎么回答。第三,把答案写成一页纸,让相关方签字。这一页纸的价值,抵得上一份两百页的规划方案。

还有个心态上的建议。别指望一次做完。我见过的成功案例,都是分年推进、每年解决一两个域的。第一年做客户和物料,第二年做供应商和组织,第三年做指标体系和资产盘点,节奏稳,返工少。治理是长期复利,不是一次性交付。急着在一年内把所有域都覆盖的项目,通常第二年就得重组。

至于工具,我的态度一直很明确:先用它解决已经被定义清楚的问题,别指望它替你做组织协调。普元主数据管理平台、数据资产平台、Data Workshop、BI、AI 问数这几样东西,在各自的位置上都挺能打,但它们都是执行器,不是决策者。什么时候该上什么,取决于你手上的问题已经被拆到多细。把问题拆清楚这件事,任何厂商都替不了你。

如果你现在正卡在“项目做完了但没人用”这个阶段,也不用急着推倒重来。先去做那十次业务回访,找到真实的决策场景,再从场景倒推需要补什么。多数项目的底子是有价值的,缺的往往是最后一公里的信任和入口。把这一公里修通,前面的投入才算真正兑现。

读者评论

陈立航:我们去年就是这么栽的,标准文档做了一大本,交付完就没人翻了。看完这篇最有共鸣的是“标准跟业务两张皮”那段,确实二十几级的分类业务根本记不住。今年打算按单域切入重来一次,先做客户主数据。

周敏华:想问下,如果业务部门死活不愿意签字认责,只能IT推着走,有没有什么实操的办法?我们这边就是卡在这一步,领导口头支持,但部门层面没人愿意接。

许志远:制造业那段太真实了。我们也是三套系统客户编码不一致,开了无数次会。后来确实是把归口部门定下来才动的系统,顺序反了就是白花钱。补充一点,新客户录入的校验规则一定要硬约束,别留后门,留了就等于没做。

林晓芸:文章里提到“治理成功的标志是会议议题变了”,这句话我截图发给我们领导了。之前一直没法跟老板解释治理的价值,用效率数字反而不好讲。

本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。

赞 (0)
LucasLinLucasLin
上一篇 2小时前
下一篇 2小时前