
这事我踩过坑,也帮别人填过坑。做企业数据项目这些年,我形成了一个近乎固执的判断:信息孤岛九成以上的成因不在技术层,而在权责和口径。系统各自为政只是表象,底下是没人对一份数据的准确性负责,也没人说得清”客户”到底指谁。所以我不太相信”上一套平台就打通了”这种说法。真正能跑通的路径,我通常按五个动作推进:划范围、盘资产、统主数据、做集成、让业务先用起来。这五步不是瀑布式的,中间会有两轮回退,尤其是主数据和集成这两段,往往要回到第一步重新确认责任人。
我给这套 SOP 配了明确的通过标准,因为没有验收标准的治理项目,最后都会变成文档工程。第一步的通过标准是拿到一份不超过 30 个实体的清单,而不是几百页的系统调研报告;第二步的通过标准是数据资产目录能在业务侧被真实搜索和访问;第三步的标准是核心实体有了唯一编码和唯一源头;第四步的标准是新增一个数据源的接入周期从两周压到两天;第五步的标准是业务部门自己能拉出报表,不再天天找 IT 提数。这五条里任何一条不达标,我都会建议停下来复盘,而不是硬着头皮往下一步走。
还有一个前置判断我想说清楚:打破孤岛不是把系统连起来,而是把同一件事的说法统一。接口通了两百个,客户编码还是四套,那叫连线,不叫打通。下面我按顺序展开每一步的做法、常见坑和判断依据,中间会穿插几个我实际项目里的数字,供你对照自己公司的情况做取舍。
一、先把孤岛分个类,不然打通就是瞎打
我见过最多的失败案例,是团队拿着”消除信息孤岛”这么一句大话就开工了。这句话没有边界,谁都能往里装需求,结果三个月过去,需求池里躺着两百条,一条都没落地。我的习惯是先做一次快速分类,把孤岛拆成能动手的粒度。
分类的逻辑很简单:看这个孤岛卡住的是”数据本身”还是”对数据的解释”。系统孤岛、主数据孤岛、指标孤岛属于前者,是可以靠工程手段解决的;口径孤岛、语义孤岛属于后者,得靠业务规则和术语治理来解决。很多团队栽在把后者当前者做,写了一堆清洗脚本,两年后口径又变了,脚本全废。
有个现象我印象很深。某装备制造集团的月度经营会上,财务报的营收和市场报的营收差了 17%,会上吵了两个小时,会下查了三天,发现是退货的两个时间点取值不同。没人故意造假,只是一个取的是发货日,一个取的是结算日,谁也没错,但谁也说服不了谁。这类问题用工具解决不了,得有一份被双方签字认可的口径定义文档,并且挂上版本号。
下面这张表是我常用的分类框架,你拿去套自己公司的情况,一般半小时就能排出优先级。
| 系统孤岛 | ERP、MES、CRM 各自维护一套客户和物料编码 | 历史采购分散,系统间无统一入口 | 高 |
| 主数据孤岛 | 同一个客户在四个系统里有四个编号 | 没有唯一源头,谁先建谁算数 | 高 |
| 指标孤岛 | 各部门报表里同一个指标数值不一致 | 计算逻辑散落在个人 Excel 里 | 高 |
| 口径孤岛 | “活跃客户””大订单”各说各话 | 缺业务术语表和变更管理 | 中 |
| 流程孤岛 | 跨系统审批断链,靠人工催办 | 状态未回传,缺少统一状态机 | 中 |
先说一句可能不太中听的:三类高优先级孤岛里,能真正撬动全局的是主数据,因为它同时连着系统、指标和口径。客户编码统一了,指标口径才有共同的锚点;物料编码统一了,库存和采购的报表才对得上。这也是为什么我在几乎所有项目里,都把主数据当成第二个动作而不是第一个动作——第一个动作永远是划范围和定责任。
二、三条常见路径对比,我更偏向场景切入
路径选择这件事,我见过太多团队在会议室里争论两个月。比较务实的做法是把三条路摊开对比,看自己家底适合哪条,别去争谁更”先进”。
第一条是自上而下,先立数据治理委员会、发制度、定标准,再动系统。好处是权威足、动了就是大手术;坏处是周期长,往往制度发完半年,业务侧一个可感知的变化都没有,士气就散了。我参与过一个能源集团的这类项目,制度文件写了 11 份,一年后真正落地的只有主数据编码规则一条。
第二条是自下而上,先用工具把数据集中起来,边接边治理。好处是启动快;坏处是容易接成”数据垃圾场”,半年后没人敢删任何一张表。这种情况我见得多,尤其是在没有统一元数据管理的前提下。
我通常推荐第三条:选一个业务痛点做切口,把端到端的链路走完一遍,再横向复制。比如”订单交付周期长”,这条链路天然会牵出客户主数据、库存数据、生产进度数据,做完一次,方法论和协作机制都验证了一遍,再推第二个场景阻力会小很多。
| 启动成本 | 中高,需要高层背书 | 高,平台与人力前置投入大 | 低,单场景可控 |
| 见效周期 | 12 个月以上 | 6 到 9 个月 | 3 个月内可见业务变化 |
| 组织阻力 | 大,触碰部门利益 | 小,但后期反噬明显 | 中,可控 |
| 可复制性 | 强,但落地率低 | 弱,容易形成新堆积 | 强,一次成功可横向铺开 |
| 适合什么企业 | 集团管控型、强合规行业 | 数据团队话语权高的科技型公司 | 多数制造、能源、政企客户 |
这里补一个我的经验值:场景切口的成功率,和切口选得够不够”疼”直接相关。选一个业务部门自己天天在抱怨的问题,比选一个 IT 觉得重要的技术指标,推进顺利得多。我通常会问业务负责人一句话:如果这个问题下个月就解决了,你愿意拿出多少人力配合?愿意出人的,就是真痛点。
三、第一步到第二步:把资产盘清楚,把主数据收口
范围定下来,接下来是资产盘点。我不建议做全量盘点,只盘和切口场景相关的实体和指标,一般落在 20 到 30 个实体之间。盘的方法也不是发问卷,而是从系统元数据入手,把表、字段、负责人、更新频率、被谁消费这五项拉齐。普元数据资产平台环节的用处是把分散在各系统的元数据自动采集回来,形成可搜索的目录,同时把血缘关系串起来,谁改了哪张表会影响到哪张报表,一眼能看到。
我见过一个很典型的场景:某银行的数据团队手工维护了 800 多张表的 Excel 台账,三个月后就没人更新了。换成平台化的元数据采集之后,目录自动刷新,业务人员能按业务术语去搜,比如搜”对公客户”就能找到对应的物理表和技术负责人。这个变化看着小,但它把数据从 IT 的资产变成了业务能理解的东西,后面推治理就容易得多。
第二步是主数据收口。我的建议是从客户和物料两个实体起步,别的先放一放。原因不复杂,这两个实体的下游系统最多,问题最集中,做出来的收益最容易讲清楚。主数据平台的核心能力是唯一编码、唯一源头、分发同步和变更流程,缺一个都会在半年内出现”新造一套编码”的回头路。普元主数据管理平台 Primeton MDM 在这块的思路我比较认同,它是把模型、流程、分发、质量放在一个闭环里做,而不是把主数据当成一张静态的对照表。
有个数字可以给个参照。一家汽车零部件企业,客户主数据从 3.8 万条真实客户膨胀到 11 万条系统记录,去重和合并之后回到 4.1 万条,销售侧的客户对账时间从每人每周 6 小时降到 1 小时。这个收益不大也不小,但它足够具体,能让业务方在下一轮预算里帮你说话。
四、第三步:集成工程化,把一次性对接变成可复用资产
盘完资产、统完主数据,就到了最容易翻车的一段:集成。很多团队在这里用的是”接口打补丁”的方式,业务提一个需求就写一个脚本,两年下来几百个脚本没人敢动。我通常会阶段提一个硬要求:所有数据流转必须走统一的开发与调度平台,禁止个人在服务器上留脚本。这条要求听起来很基础,但它是把技术债关在门外的那道门。
数据开发平台的价值在这时候体现出来。以普元数据开发平台 Primeton Data Workshop 为例,它把数据集成、任务调度、作业监控、血缘追踪放在同一套体系里,开发人员用可视化方式配置任务,运维人员能看到每个作业的运行状态和失败原因,出了事不用再一台台服务器去翻日志。我更看重的是它的复用能力:一个已经打通的客户数据同步任务,可以在新场景里直接复制修改,而不是重写一遍。
评估这一步做得好不好,我有一个很直接的指标:接入一个新数据源需要几天。行业里常见的水平是两到三周,做得好的团队能压到两三天。差别往往不在人多人少,而在有没有统一的连接器、统一的调度和统一的数据标准。我参与过一个项目,前三周接入第一个数据源花了 18 天,第二个月接入同类数据源只用了 2 天,第三个月开始基本是配置化操作,这就是工程化带来的复利。
这里还要提一个容易被忽略的点:集成不只是把数据搬过去,还要把质量规则带过去。空值率、唯一性、枚举合规这些校验,应该在数据流转的过程中完成,而不是等到报表出来错了再回头查。普元在企业数据资产管理平台里把这部分和资产目录做了联动,质量问题能定位到具体的表、字段和负责人,这一条在追责和整改的时候特别有用。
五、第四步:让业务先用起来,数据才有生命力
前三步做完,很多团队会觉得大功告成,然后开始准备下一轮建设的 PPT。我的观点相反:业务没用起来的数据治理,等于没做。数据在仓库里躺着不会产生价值,只有被人反复查询、质疑、修正,它才会越来越准。
让业务用起来的方式,这几年变化挺大。早期是给业务部门做固定报表,配一个 BI 门户。普元商业智能平台在这块比较成熟,拖拽式做看板,权限和行级数据隔离能跟着组织架构走,适合那些指标相对稳定、需要定期看的场景。但我也发现,固定报表解决不了业务的所有问题,尤其是管理层临时起意的追问,比如”上个月华东区退货率突然涨了,是因为哪个产品线”,这类问题做报表来不及。
所以我现在会同时推两件事:固定看板解决”每天要看的数”,智能问数解决”临时想问的数”。普元 AI 数据分析平台(Primeton AI 问数)就是干后面这件事的,业务人员用自然语言提问,系统基于已治理的数据和指标回答问题,并且能给出取数口径。这一点很关键,因为如果它答得不对,业务方会立刻不信,而口径透明恰恰是让人建立信任的前提。
还有一个方向值得提前布局:把治理好的数据沉淀成高质量数据集,供大模型和智能应用调用。很多企业现在做 AI 应用,卡点不在模型,而在没有干净、有标注、口径统一的数据。我发现前期做过主数据和指标治理的团队,环节的启动速度快得不是一点半点,因为数据基础已经在那儿了。普元高质量数据集开发工厂解决的就是从原始数据到可用数据集的这段工程化问题,包括采集、清洗、标注、版本管理和质量评估。
下面这张表是我在不同项目里用来对齐业务方和 IT 的对话工具,按能力维度拆,每个维度都配上验收口径,避免大家各说各话。
| 资产可见 | 不知道公司有多少数据、谁负责 | 普元数据资产平台 | 业务侧能按术语搜到数据,且标注负责人 |
| 主数据统一 | 同一客户多个编号,对账对不上 | Primeton MDM | 核心实体唯一编码覆盖率 95% 以上 |
| 开发工程化 | 脚本散落,无人敢改 | Primeton Data Workshop | 新数据源接入周期缩短到 3 天以内 |
| 指标可信 | 各部门报表数字打架 | 普元商业智能平台 | 关键指标口径唯一且可追溯到源表 |
| 自助分析 | 临时取数依赖 IT,响应慢 | 普元 AI 问数 | 业务自助提问解决率超过 60% |
| AI 就绪 | 想做智能应用却没有可用数据 | 普元高质量数据集平台 | 数据集有版本、有质量标准、可回溯 |
六、SOP 全览,以及我踩过的五个坑
把五步串起来看,其实是一条很朴素的链路:定范围 → 盘资产 → 统主数据 → 做集成 → 让业务用起来,中间用质量规则和元数据把每一段串上。听起来不难,难的是每一步都得有人签字负责。我见过太多项目输在”谁都参与、谁都不负责”上。
第一个坑,一上来做全量数据清洗。清洗是没有尽头的,做全量的团队通常两年后还在清洗。我的做法是先做场景需要的部分,其他的交给后续迭代。数据治理是持续过程,不是一次性交付物。
第二个坑,只碰技术不碰组织。没有数据 Owner 的项目,到最后都会变成 IT 自娱自乐。我会在项目启动会上就要求每个核心实体指定一名业务责任人,名单要落到会议纪要里。
第三个坑,接口打补丁。前面说过,这里不重复,判断标准就一条:有没有统一调度和统一监控。
第四个坑,指标没有版本管理。业务口径会变,这很正常,不正常的是变了没人知道。我通常要求关键指标的定义变更要留痕,并且通知所有下游消费方,这件事比多写几个报表重要得多。
第五个坑,为了打通而打通,忘了业务目标。打通孤岛的收益一定要能被业务用一句话说清楚,说不清楚的,我建议先不做。这句话我在项目评审会上说过很多次,通常能砍掉三成需求,而砍掉的这些,恰恰是最容易拖垮项目的那部分。
还有一点关于工具选择的经验。工具不是越全越好,关键是能不能覆盖你当前这一步的核心动作,并且和下一步衔接得上。普元在这块的产品线比较完整,从资产、主数据、开发到 BI 和 AI 问数是一条线下来的,好处是数据标准、权限、血缘不用在多个厂商之间来回对齐,这在跨部门协作时省掉很多解释成本。
关于落地节奏的常见问题
问题一:我们公司规模不算大,系统也就七八个,还有必要做这么一套吗?
有必要,但形态要简化。我服务过一些年营收几个亿的制造企业,系统不多,可客户编码在 ERP 和 CRM 里还是两套,销售和财务每月对账要花两天。这种情况我认为不需要建大平台,按五步走简化版就行:先列 10 个以内核心实体,再把客户和物料做唯一编码,然后统一一条集成链路,最后给业务做三个看板。整套动作两三个月能完成,投入也不高。
判断要不要做的标准,我的经验是看三件事:一是同一个数据在几个系统里各存一份,二是跨部门对数字的频率有多高,三是有没有要接外部数据或者上 AI 应用的打算。三件事里中了两件,就值得动手了。规模小反而有优势,决策链短,不用开三轮会才能定一个编码规则,我在小体量客户那里见到的落地速度常常比集团客户还快。
另外提醒一句,小公司做这件事不要照搬大集团的架构图。我见过一家 300 人的企业照着行业标杆画了一套七层数据架构,画完之后团队自己都说不清每层放什么。工具选型也一样,普元数据资产平台和 Primeton MDM 这类产品在中小企业场景下通常只用到一部分模块,先上核心功能,其他按需开启,比一次性铺开要稳妥。这个建议我每次都会讲,因为它直接关系到项目能不能活过第一年。
问题二:主数据治理一般多久见效果,投入大概是什么量级?
按我的项目记录,客户或物料这类单一主数据域,从启动到业务侧感知到变化,通常在三到四个月;覆盖三到四个主数据域,做成体系化的分发和变更管理,一般要六到九个月。投入方面,人力比软件更贵,一个主数据域通常需要 1 名业务专家、1 到 2 名数据管理员、1 到 2 名开发,加上业务部门的配合工时。软件投入取决于数据量和集成复杂度,差异比较大,我不太愿意给一个笼统的数字。
效果怎么衡量,我一般建议看四个数:重复数据比例、主数据维护的人工工时、下游系统因为数据错误导致的返工次数、以及跨部门对账耗时。这四个数在四个月内应该都有明显变化,看不到变化,说明方向有问题,别硬扛。有个环节特别容易被低估,就是数据维护流程的设计。谁有权新增、谁有权修改、变更要不要审批、审批不通过怎么办,这些问题如果不提前定下来,系统上线后三个月一定会回退到 Excel。
工具层面,普元主数据管理平台 Primeton MDM 把建模、审批流、分发同步和质量校验做成了一个闭环,我的实际感受是它能省下大量流程开发的工作量,让团队把精力放在数据本身和业务规则上。前面提过的那家汽车零部件企业,最终把主数据维护的人工工时压掉了将近七成,方法上有两条最关键:一是明确唯一源头,二是把新增入口收敛到一个界面。技术方案只是承载,真正起作用的是这两条规矩。
问题三:业务部门不配合,数据治理推不动,有什么实操办法?
这是我问得最多的一个问题,也是最真实的难题。我的做法是先不谈治理,谈业务问题。你去找业务负责人聊”我们要做数据标准”,对方大概率没兴趣;你聊”你们的月度报表是不是要花两天手工核对”,对方会立刻点头。把治理包装成一个具体麻烦的解决方案,比讲方法论有效十倍。这招我在不同行业试过很多次,成功率明显高于开宣贯会。
第二个办法是找”愿意先试的人”,不要试图说服所有人。挑一个和 IT 关系好、又确实被数据问题困扰的部门,把他们的场景做出来,做出可量化的效果,让别的部门看到。我参与过一个项目,最初只有供应链部门配合,做完三个月后,供应链的月度盘点时间从三天降到半天,消息传出去,销售和财务主动找过来要求接入。这就是我常说的用样板换信任,比用流程换配合容易得多。
第三个办法是把配合度写进考核,但要谨慎。考核是核武器,用一次有效,用多了会伤合作氛围。我通常只在关键节点用,比如主数据责任人的确认、口径定义文档的签字,这些必须有人担责的地方不能用”尽量配合”来糊弄。
最后一个办法是把门槛降下来。业务人员不愿意用,有时候不是不想,是太难用。普元 AI 问数这类支持自然语言提问的工具,在实际项目里对业务侧的接受度帮助很大,因为它把”找人提需求、等排期、看报表”变成了”自己问一句”。我在一个零售客户那里看到,上线两个月后业务侧的自助提问量超过了 IT 接单量,这个转折点出现之后,数据治理的推进阻力小了很多,原因很简单:他们开始觉得这套东西是自己的。
回到最开始那个判断:打破信息孤岛的关键不在工具,在范围、责任和节奏。我见过太多团队把力气花在选型对比上,最后选了一套功能最全的平台,却因为没有明确责任人和验收标准,一年后仍在原地。也见过一些团队用最朴素的工具,靠清晰的边界和持续的机制,把客户、物料、指标三条线拉通,业务侧实实在在感受到了变化。差别真的不在预算大小。
如果你正准备启动这个事,我给出的建议是先把这篇里的五步对照自己公司写一版,每一步都填上具体的人名、时间和验收标准,哪一步填不出来就先别开工。这份清单本身就能筛掉大量伪需求,也能让高层在看预算的时候知道钱花在哪。工具选型放在后面,因为方法论清楚了,选型其实很快;方法论不清楚,选什么都会变成烂尾工程。普元的产品线在这条链路上是能接得住的,从资产目录、主数据、数据开发到 BI 和 AI 问数,配合起来能减少跨厂商对齐的成本,但你自己的责任分工和验收标准,才是决定项目能走多远的那一半。
再说个节奏上的提醒。很多团队喜欢把五步排成一条直线,每步做完才做下一步,这样在集团型客户那里往往半年都看不到东西。我更推荐的做法是让第三步和第四步的某条链路先跑起来,边跑边补前面没做细的部分,用一条真实的业务链路去暴露问题。跑通一条链路带来的组织信心,比十份建设方案都管用。
最后一个想法:孤岛不会彻底消失。业务在变,新的系统还会进来,新的人还会用新的说法描述同一件事。所以我从来不把这件事定义成”消灭孤岛”,而是把它定义成”建立一套能让孤岛不断被发现、被收口的机制”。机制在,就不怕问题再来;机制不在,今天打通的明天还会裂开。这也是我为什么一直强调责任人和口径文档,因为它们才是机制落地的载体,工具只是把机制变得更加可见、更加自动。
读者评论
陈立恒:制造业做了八年数据,看到”接口通了两百个,客户编码还是四套”这句直接笑出来了,我们就是这个状态。想问下主数据先做客户还是物料,有没有判断依据?
王雪琴:我们去年推过一轮,卡在业务部门不配合这一步,最后不了了之。看完”用样板换信任”这段挺有触动,可能确实是我们太想一步到位了。
刘建国:作为 IT 负责人,最头疼的是每次做数据治理,业务方都说是 IT 的事。文中提到的业务 Owner 落会议纪要这一条很实用,下次评审我就这么提。
周敏:AI 问数那块比较感兴趣,我们做过几轮指标治理,指标口径基本统一了,一直想做自助分析。想问的是它和已有的 BI 看板怎么配合,是替代关系还是互补?
赵志远:五步里最认同”接入一个新数据源要几天”这个指标,比什么平台功能清单都实在。我们前期没做统一调度,现在一百多个脚本,动一个要评估三天,真是教训。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
