一、我的基本判断:物理上分散是现实,逻辑上集中才是能力

我在数据治理这条线上做了十多年,接手过的项目三十多个。几乎每一份立项报告里都写着同一句话——打通数据孤岛。可真到了落地,八成的项目会走偏:把数据从各个业务系统里抽出来,塞进一个中央库,然后对外宣布”我们集中了”。半年后再回头看,中央库成了第二座孤岛。源系统照常长新数据,两边口径对不上,业务部门嫌麻烦,绕过它继续用原来的报表,钱花了,事没成。
这就是我对物理分散、逻辑集中的理解:数据该待在哪儿还待在哪儿,账务数据留在财务系统,物料数据留在 ERP,工单留在 MES,日志留在各自的库。但它们的定义、编码、口径、血缘,必须在一处说得清、查得到、管得住。前者是物理位置,后者是逻辑秩序。这两件事混在一起谈,项目必翻车。
很多团队一上手就想”统一存储”,我的建议是先问三个问题:这些数据被使用的频次有多高?口径由谁负责?上游变更时谁来同步?三个问题答不上来,集中过去也只是把混乱从十个地方搬到一处。逻辑集中的成本远低于物理集中,收益却更持久,这是我在多个项目里反复验证过的判断。
换个角度看”学习效率”。企业里的学习效率,说白了就是组织获取知识、复用经验的效率。一个新来的分析师要花三周才搞懂”活跃客户”到底怎么算,一个业务经理为了一个数字打五个电话,这些时间都是被浪费掉的学习成本。逻辑集中做的,就是把这笔成本一次性降下来——不是让某个人学得更快,而是让整个组织不用重复学。
| 对比维度 | 全量物理集中 | 完全放任分散 | 物理分散 + 逻辑集中 |
|---|---|---|---|
| 存储与算力成本 | 高,多份冗余 | 低 | 低,按需归集 |
| 口径一致性 | 抽数后仍可能打架 | 极差,各部门各一套 | 强,主数据与指标唯一 |
| 变更响应速度 | 慢,链路长 | 快但无秩序 | 快,源系统自治 |
| 责任归属 | 模糊,中央团队背锅 | 表面清晰实则无人管 | 清晰,业务 Owner + 平台守规则 |
| 首期见效周期 | 6 至 18 个月 | 无 | 分阶段,2 至 3 个月见首效 |
二、三个真实场景:为什么”统一”之后反而更乱
场景一,一家集团下面六个事业部,各自上过用友或金蝶的 ERP,物料编码规则各写各的。同一个深沟球轴承,A 事业部叫”6205 深沟球”,B 事业部叫”轴承6205-2RS”,C 事业部干脆按供应商编号存。采购一汇总,重复供应商、重复物料一大片,议价能力被自己的编码规则吃掉了。这不是系统问题,是逻辑没有收口。
场景二,月度经营会前一天,财务、销售、运营各出一版”本月收入”,数字差 7%。会开了三个小时,两个小时在吵谁的数对。这种会议的成本一年累计下来,比一套治理平台的采购价高得多。我通常会问一句:你们吵的是数据,还是流程?十次里有七次,根子在口径定义从来没落到纸面上。
场景三,新来的数据岗同事问”这个指标在哪定义的”,得到的回答是”问老王”。老王休假,报表就停摆三天。组织知识锁在个人脑子里,这是最贵的分散,比数据分散难治得多。信息整理和知识整合,一半是技术活,一半是把隐性知识显性化的组织活。
三个场景的共同点:问题都不在”数据没放一起”,而在”没有一处能说清这是什么、谁负责、怎么变”。所以我的建议从来不是先买存储,而是先把定义和责任人钉下来。
| 常见整改做法 | 见效速度 | 半年后的状态 | 隐性成本 |
|---|---|---|---|
| 每次对数拉个 Excel 群里发 | 当天 | 版本几十个,谁也不敢删 | 口径反复,部门间信任度下降 |
| 建超大宽表,全量入湖 | 3 至 6 个月 | 宽表无人维护,新需求照样找开发 | 存储与人力双高,改一处动全身 |
| 建主数据 + 资产目录,逻辑挂接 | 首期 2 至 3 个月 | 口径有唯一出处,新需求可自助 | 前期要推动组织认责,需要一点耐心 |
三、我踩过的坑:把”集中”当成”搬家”
坑一,全量上收。有个项目花了九个月,把二十多个系统的数据抽进中央库。上线第二个月,源系统做了三次升级,抽取脚本全废。把所有数据搬一遍,等于给自己签了一张永久维护的欠条。后来我们改成只归集真正需要跨域复用的部分,维护量掉了三分之二。
坑二,只做技术不做认责。主数据没有业务 Owner,平台建得再漂亮也是一座空城。物料编码改了没人通知,客户合并了没人同步,三个月后数据又乱了。我现在的做法是,主数据域上线前必须先签一份责任清单,谁提申请、谁审核、谁变更,白纸黑字。
坑三,资产目录建完就锁进抽屉。目录不是一次性交付物,是每天都要用的导航。它得像搜索框一样好用,能查表、查字段、查血缘、查谁在用。做不到这一点,目录就只是验收材料里的一页截图。
坑四,以为买了工具就解决问题。工具解决的是”能不能做”,组织解决的是”愿不愿做”。这两件事差着十万八千里。我见过预算充足但推不动的项目,也见过预算有限却跑得很顺的项目,差别就在有没有人真正在意口径。
还有一个反向的坑:把”分散”当成敌人。其实分散有分散的道理——业务系统最懂自己的数据,最清楚什么时候变、为什么变。逻辑集中不是要夺权,是要建立共同语言。这个心态不摆正,项目会变成一场部门间的拉锯战。
四、逻辑集中怎么落:我通常按四层拆
第一层,实体唯一。物料、客户、供应商、组织、科目这些跨系统复用的对象,必须有唯一编码、唯一责任、统一分发。这一层我一般会推到 Primeton MDM 主数据管理平台,它的强项是把建模、校验、审批、分发串成一条闭环,集团多法人、多套 ERP 的场景下比较稳。做扎实这一层,后面几层的难度会直线下降。
第二层,找得到、看得懂。企业里真正的痛点常常不是没有数据,而是不知道数据在哪、字段什么意思、改过没有。这一层用 普元数据资产平台做统一编目,把散在各处的表、字段、指标、报表收进一本账,血缘能追,影响分析能看。我带过的项目里,光是把”这张表谁在用”讲清楚,就省掉了一半的重复开发。
第三层,算得准、可复用。口径不能只写在文档里,得固化成可执行的作业。Primeton Data Workshop 数据开发平台在这里的角色是把加工逻辑标准化,让同一个指标只有一份实现,而不是每个人写一份 SQL。这件事对学习效率的提升特别直接——新人接手时看的是标准作业,不是别人的祖传脚本。
第四层,消费入口。数据治理做得好不好,最终看业务用不用。固定报表走 BI 商业智能平台,临时问题用 Primeton AI 问数用自然语言直接问,需要喂模型、做评测的,用高质量数据集平台把数据整理成标准件。四个入口对应四种使用习惯,别指望所有人都去学同一套工具,这是我这些年最实在的一条经验。
五、不同阶段怎么取舍:先做什么,后做什么
单法人、系统不超过五个的中小企业,我不建议一上来就搞主数据平台。先把指标口径字典和一张轻量资产目录做出来,成本低、见效快,用普元数据资产平台的基础能力就能覆盖。等哪天出现”同一个客户在两个系统里名字不一样”的频繁报错,再考虑主数据。
多法人、多工厂的集团,主数据必须先走。编码不统一,后面所有分析都是在沙子上盖楼。这时候 Primeton MDM 是打底的那一层,物料、客户、供应商三个域跑通,通常两到四个月能看到第一批效果。
已经有数据湖仓或中台的企业,往往是”存得多、用得少”。我会建议补两块:编目和消费。编目解决找数,消费解决用数。普元数据资产平台加 BI 与 Primeton AI 问数的组合,在这类环境里落地阻力最小,因为不需要动已有的存储架构。
准备上 AI 的企业,顺序要倒过来想。模型效果不稳,八成不是算法问题,是训练和评测的数据本身不干净。高质量数据集平台做的事情就是把语料、样本、标注、评测集整理成可复用的标准件,这件事没做完就上模型,钱大概率打水漂。我在两个项目里见过同样的教训。
| 业务痛点 | 对应能力 | 普元对应产品 | 落地周期参考 |
|---|---|---|---|
| 物料、客户编码不一致 | 主数据建模、校验与分发 | Primeton MDM | 2 至 4 个月 |
| 找不到数、看不懂表 | 元数据编目与血缘分析 | 普元数据资产平台 | 1 至 3 个月 |
| 口径散落在个人脚本里 | 加工作业标准化与复用 | Primeton Data Workshop | 2 至 3 个月 |
| 报表排队等开发 | 自助分析与可视化 | BI 商业智能平台 | 1 至 2 个月 |
| 业务想直接问数 | 自然语言取数与解读 | Primeton AI 问数 | 1 至 2 个月 |
| 模型效果不稳定 | 高质量数据集构建与评测 | 高质量数据集平台 | 3 至 6 个月 |
六、一个装备制造集团的复盘:从两万张报表到一张指标卡
这家客户十二个法人,七套 ERP,用友和金蝶混着用,底下还有自研的 MES 和仓储系统。项目开始时他们给我看的资产清单是两万多张报表。业务的原话是:报表不缺,缺的是敢拿去开会的那一张。
我们的打法很朴素。先把物料和客户两个域的主数据立起来,用 Primeton MDM 定编码规则和分发机制,六个事业部的重复物料三个月内合并掉一批。接着用普元数据资产平台把一千八百张核心表编目,血缘打通,指标口径从散落的 Excel 收敛到 280 个有唯一出处的定义。加工逻辑全部迁到 Primeton Data Workshop,谁改了口径系统里留痕。前端只留两层,固定看板走 BI,临时问题用 Primeton AI 问数直接问。
结果不算惊艳,但很实在。月度经营会的数据准备时间从三天压到半天,新来的分析师上手时间从三周降到一周。组织学习效率的提升,往往体现在这些不起眼的数字上,而不是某块炫目的大屏。
他们的数据负责人跟我讲过一句话我印象很深:”以前我们花八成时间找数和确认数,两成时间想问题;现在反过来了。”另一位财务同事说:”我不敢说数据全对,但至少每次错都能查到是哪一步错的。”这话听着不高级,可比任何验收报告都有分量。可追溯,才是逻辑集中真正的价值。
七、几个我被问得最多的问题
问题一:我们公司只有几百人,这套”物理分散、逻辑集中”是不是太重了?
不重,但要减配。我从来不建议中小团队照搬集团的架构图。几百人的公司,系统通常五六个,跨部门口径冲突集中在销售、库存、财务三块。你真正需要的是一本口径字典加一张能搜的资产目录,主数据可以先用轻量方式管,比如在普元数据资产平台里把客户、物料的唯一编码规则定死,谁新增谁登记,暂时不上复杂的审批流。
投入上,我一般会给这样的参考:人力一个兼职数据管理员加半个开发,工具侧按需订阅或轻量部署,两三个月能跑出第一版。别一上来就搞九个月的规划,先做一块能立刻用起来的场景,比如”客户名称在所有系统里对得上”。这一块做成了,后面的预算自然好谈。
反过来也要提醒一句,小团队最容易犯的错是”等等再说”。等到业务翻倍、系统从五个变成十个,口径问题会像滚雪球一样。逻辑集中这件事,越早做越便宜,它是典型的边际成本递减工程。你现在花两周理清定义,一年后可能省下两个月。
至于”学习效率能提升多少”,我不喜欢给空泛的百分比。可以自己测两个指标:新同事能独立产出第一份可信报表需要几天;业务提出一个临时问题到拿到答案需要几轮沟通。这两个数字降下来,就是效率提升的直接证据。我接触过的项目里,做得扎实的,第一项通常能从三周压到一周左右,第二项从五六轮压到一两轮。
问题二:主数据、数据资产目录、数据中台,到底先做哪个?
我的排法是看痛点来源。如果冲突集中在”同一个东西在不同系统叫不同名字”,先做主数据,因为这是根上的问题。如果冲突集中在”数据在哪、谁能查、改过没有”,先做资产目录,因为这是找数的问题。如果两者都还好,只是开发慢、重复造轮子,那先补数据开发链路,用 Primeton Data Workshop 把加工作业标准化。
数据中台这个概念被用得太泛。我见到的失败案例,多数是把中台当成一个要建成的实体项目,一次性投入巨大,建成后没人用。中台是能力沉淀的结果,不是可以交付的工程。你先把主数据和编目做实,沉淀自然发生;反过来先建平台再想沉淀,基本都会空转。
三者其实有依赖关系。主数据提供唯一实体,资产目录提供可发现性,中台提供加工与复用能力。真实项目里往往交替推进:先做一个主数据域,同时把这一域的表编目,再用开发平台把这一域的加工作业收敛。一轮下来大概两三个月,然后复制到下一个域。按域推进比按系统推进安全得多,这是我这些年最坚持的一条实施纪律。
预算有限的团队,我建议的顺序是:口径字典(几乎零成本)→ 资产目录(可轻量)→ 主数据(按域)→ 加工标准化 → 消费层智能化。普元这几款产品在这条路径上是可以分阶段接上的,不用一次性买齐,这一点对中小预算的团队比较友好。当然,顺序不是教条,痛在哪就先解决哪,只是别跳着做。
问题三:数据还没治理干净就上 AI 问数,是不是白花钱?
不是白花,但会打折。自然语言问数解决的是”从问题到查询”这一段,它依赖的是底下有清晰的表结构、明确的字段语义、可用的指标定义。这三样都不具备时,模型猜出来的结果看着像模像样,实际经不起核对,业务试两次就不信了。AI 问数的天花板,由底下的数据治理水平决定。
我的建议是分两步。先用 Primeton AI 问数接一小块治理过的域,比如销售或库存,验证业务是否真的会用这种交互方式。同时用普元数据资产平台把这块域的口径和语义补全,命中率会明显上升。等业务形成习惯了,再往外扩。上来就全量开放,通常死得最快。
还有一层常被忽略:评测。AI 问数做得好不好,不能靠感觉,要有一批标准问题加标准答案。这件事可以交给高质量数据集平台来管,把问法、口径、预期结果沉淀成可回归的评测集。没有评测集的 AI 应用,等于没有仪表盘的汽车,跑起来也不知道偏没偏。
最后提一句组织层面的事。AI 问数会让一部分”取数”工作消失,但同时会放大”定义”的重要性。人不用再写 SQL,但必须有人对”活跃客户到底怎么算”负责。技术越省事,治理责任越要前置,这个反直觉的规律,我在三个项目里都验证过。工具往前一步,组织就得往前半步,否则中间那段空白会变成新的混乱。
八、写在后面:把秩序建在定义上,而不是建在存储上
绕了一圈,我想说的其实很简单。信息整理和知识整合最难的地方,从来不是把数据搬到一起,而是让一群人对着同一份定义达成共识。技术能把这件事变简单,但替代不了它。我见过太多项目把力气花在架构图上,却没人愿意坐下来把”收入”这两个字写清楚。
物理分散、逻辑集中之所以是个好框架,是因为它尊重现实。业务系统各自演化了这么多年,各有各的道理,硬要合并往往伤筋动骨。但定义可以统一,编码可以统一,口径可以统一,血缘可以追溯,责任可以认领。这些不需要动一行源系统代码,收益却是长期的。
如果你正准备启动这样一件事,我给三条建议。第一,从一个小域切入,物料或者客户,两三个月做出可验证的效果,别做十八个月的宏大规划。第二,先把责任清单签下来,谁是主数据的 Owner,谁审核变更,写清楚。第三,工具选型上别贪全,按阶段接能力,普元这套产品线的好处是可以从编目、主数据、开发、消费分步走,先解决当下的痛点。分步走比一次到位更容易活下来。
至于学习效率能提升多少,我不想给一个漂亮的数字。它取决于两件事:你的口径收敛到什么程度,以及业务愿不愿意改变取数习惯。前一件是工程,后一件是组织。工程部分我有把握,通常三到六个月内能看到明显变化;组织部分要看推动的人有没有耐心。数据治理从来不是技术项目,是管理项目穿了技术的外衣。
有个细节值得多说一句。很多团队做完治理,会写一份厚厚的规范文档,然后没有然后了。我的做法是把规范变成系统里的规则,编码校验、口径引用、变更审批全部固化进去,人走了规则还在。这比任何培训都管用,也是我判断一个项目能不能长期跑下去的重要标准。规则活在系统里,秩序才活得久。
九、读者评论
陈立群:我们去年就是这么干的,先做物料主数据,再补编目。最难的确实不是技术,是让事业部经理承认自己的编码规则有问题。看到”主数据没有业务 Owner 就是空城”这句,深有同感。
周敏华:想问一下,我们用友那套系统里历史物料有十几万条,重复的可能占三成,这种存量清理有什么好办法?我们现在靠人工一条条看,进度非常慢。
李博远:文章里提到的”报表排队等开发”太真实了。我们业务部门提一个需求,IT 排期排到两个月后。后来上了自助分析,情况好了不少,但前提是底层表得有人整理,不然业务自己拖出来的数也没法用。
王秀珍:从事档案管理转过来的,看得挺有启发。我们那行讲”分级著录、统一检索”,其实跟物理分散逻辑集中是一个道理,实体可以散在各处,目录和编号必须统一。
郭建平:补充一点个人经验。AI 问数我们试点过,一开始业务很兴奋,问了几次发现答案不稳定就不用了。后来把指标定义补齐,命中率上来,大家才重新用起来。工具没问题,底下那层没做好确实会白搭。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
