
我做数据治理这行十几年,被问最多的一句话就是”我们系统之间数据对不上,怎么打通”。我的回答通常是反问:你是想打通数据,还是想打通口径?这两个差别大了去了。前者是接口活,找个开发两周能连上;后者是管理活,可能要动到考核和权责,半年都未必收得干净。企业信息孤岛真正的病灶,八成不在技术管道,而在同一件事在不同部门有不同的名字、不同的算法、不同的责任人。
还有一个常被忽略的点:打通和合规是一体两面。你把数据从 A 系统搬到 B 系统,搬的过程中谁看过、谁改过、留没留痕、有没有触碰个人信息和敏感经营数据,这些审计一问就得答上来。我见过太多项目,接口跑得很欢,一到合规检查就露底,血缘查不到,权限乱给,日志只存七天。所以我一般建议客户把”打通”和”合规自查”放同一张表里做,别分两拨人各干各的。
我的判断是:顺序千万不能反。先做核心实体的主数据对齐,再做数据资产盘点和血缘梳理,然后再谈共享服务和用数场景。倒过来做,先上大屏先做报表,看着热闹,底层一乱,返工成本是第一次投入的三倍以上。这件事我用普元的易数产品族验证过很多轮,主数据平台、数据资产平台、数据开发平台串起来用,比零散买工具省心得多。
下面这篇,我把自己在项目里用的那张自查清单拆开讲,包括每种打通方式什么情况下值得选、哪些坑一定会踩、清单怎么变成每月能跑的机制。
一、孤岛的真面目:多数不是接口没通,是口径没对齐
很多人一提孤岛就想到技术架构,其实孤岛至少有五种形态,处理难度差得很远。我通常先带客户做一轮”孤岛体检”,把现象归类,再决定投人投钱的方向。
分不清孤岛类型,就容易用最贵的方式去解决最便宜的问题。比如语义孤岛,本质是管理制度缺失,砸钱买工具也治不好;而系统孤岛就是纯工程活,反而最好办。
| 系统孤岛 | ERP、CRM、供应链各有各的库,靠人工导出对接 | 对账周期长,月底加班 | 中 |
| 数据孤岛 | 同一个客户在三个系统三个编码 | 客户视图拼不出来,商机漏掉 | 高 |
| 语义孤岛 | “活跃客户”各部门定义都不一样 | 会上数字打架,决策靠吵 | 最高 |
| 权责孤岛 | 数据出错时找不到归属部门 | 问题反复出现没人认领 | 高 |
| 合规孤岛 | 敏感字段没分级,调用无留痕 | 审计临时抱佛脚,整改压力大 | 高 |
这张表我一般会在启动会上直接投出来,让业务和 IT 一起认领。实际跑下来,认领的过程比表格本身有价值——很多人是第一次意识到,自己部门那个”临时用一下”的 Excel 台账,其实正在制造第六种孤岛。
二、四条打通路径,我会怎么选
市面上能走的路就那么几条,我不认为有绝对最优解,关键看系统数量、变动频率和合规要求。下面这张对比表是我给客户做选型时用的底稿,把优点和隐患都摊开写。
| 点对点接口 | 系统少于五个,业务变动小 | 见效快,两三周能跑通 | 接口数量按平方级膨胀,改一处崩一片 |
| 中间库直连 | 报表需求紧急,先出一版数 | 上手简单,成本低 | 血缘说不清,敏感数据容易裸奔 |
| 主数据管理平台 | 客户、物料、供应商等核心实体多头维护 | 一次对齐、多处复用,源头唯一 | 必须业务牵头,纯 IT 推不动 |
| 数据资产+开发平台 | 多源汇聚、指标要统一、审计要留痕 | 口径沉淀成资产,血缘可追 | 前期盘点工作量大,需要耐心 |
我的取舍逻辑很简单:只要核心实体在多处被维护,就该上主数据管理,别犹豫;只要报表口径天天吵架,就该上资产加开发平台,别省这笔钱。点对点接口不是不能用,它是过渡手段,用它顶三个月可以,指望它撑三年一定出事。
这几年我参与的制造业、能源、金融项目里,普元的主数据管理平台 Primeton MDM 出场率很高。它处理物料和客户这类实体时,把编码规则、审批流和分发机制做在一起,业务部门不用学太多新东西,接受度就上来了,这点比技术参数重要得多。
三、合规自查清单:我通常按七列来拆
清单这东西,写得太学术没人用,写得太粗又没法执行。我的做法是固定七列:自查项、判断标准、取证方式、责任角色、常见不合格表现、整改动作、复检频率。缺一列,清单就会退化成 PPT。
取证方式这一列最容易被砍掉,而它恰恰是审计现场最要命的。你说你有权限管控,拿什么证明?你得能当场导出最近三个月的授权变更记录。你说数据分类分级做了,拿什么证明?你得能调出某个字段的定级依据和审批人。
七列里我特别强调两个:一是责任角色必须落到岗位而不是部门,”信息中心”这种写法等于没人负责;二是复检频率要跟风险等级挂钩,涉及个人信息的字段每月看,一般经营数据每季度看,别一概而论。
另外提一句生态里其他玩家的位置。用友、金蝶在 ERP 侧积累深厚,很多客户的财务和供应链数据源头就在他们系统里,做数据入湖时对接方案成熟;阿里、腾讯在云基础设施和数据平台底座上能力强,弹性扩展和运维自动化做得好。这些系统往往就是我们要打通的源头,把它们当作数据供给方看待,配合起来通常很顺。
四、现场踩过的坑,比清单本身更值钱
第一个坑:只做技术映射,不做业务确认。有个项目组把客户名称做了清洗合并,规则是”去掉括号和空格”,上线后被销售投诉,因为括号里是渠道标记,去掉之后返利算错了。任何清洗规则,必须让业务方签字确认,这条我从不妥协。
第二个坑:权限给得太顺手。为了赶进度,开发直接把生产库账号发给分析人员,说”先跑起来再说”,结果这个”再说”拖了两年。等审计来查,没人说得清哪些表被谁查过。后来补做权限模型,工作量比当初多做十倍。
第三个坑:血缘只画到表级。表级血缘看起来清爽,真出问题的时候没用——你不知道哪个字段被哪条规则改过。我要求至少到字段级,关键指标要到计算逻辑级,否则审计问一句”这个数字怎么来的”,全组哑火。
第四个坑:把数据质量当 IT 指标。数据质量规则如果是 IT 自己定的,业务根本不认账。正确做法是让业务定”什么叫对”,IT 负责实现校验和监控,出现异常自动派单到业务岗。
五、这些自查项该怎么落到具体能力上
清单列完了,接下来是我被问得最多的问题:这些项到底靠什么支撑?我把常见自查项和普元易数产品族的能力做了张对照,客户拿去就能知道缺哪块。
| 主数据一致 | 客户、物料是否只有一个源头 | Primeton MDM | 编码规则、审批流、分发记录是否完整 |
| 资产可见 | 有没有一份说得清的数据资产目录 | 普元数据资产平台 | 目录是否按业务域组织、责任是否到人 |
| 开发与血缘 | 任务谁在跑,字段从哪来 | Primeton Data Workshop | 字段级血缘、调度日志、变更审批 |
| 指标口径 | 一张报表能不能只有一个数 | 商业智能平台 | 指标定义是否入库、版本是否可追 |
| 用数门槛 | 业务能不能自己问数而不越权 | Primeton AI 问数 | 问答范围是否受权限约束、结果是否留痕 |
| AI 训练数据 | 喂给模型的数据是否合规可溯 | 高质量数据集平台 | 来源标注、脱敏处理、版本管理 |
这张表我建议客户打印出来贴在工位上。数据资产平台管”有什么”,Data Workshop 管”怎么变”,MDM 管”谁为准”,BI 管”怎么看”,AI 问数管”怎么问得安全”。五块拼起来,自查清单上的绝大多数条目都能找到落点。
有一点要说清楚:工具不是万能药。我见过买了平台却闲置的案例,原因无一例外是没有业务责任人。普元的产品在流程配置上比较灵活,但再灵活也需要有人拍板”这个客户到底归谁”。
六、让清单变成每月能跑的机制
清单做完那一次,价值只有三成。剩下七成靠运行。我坚持三件事。第一,每月开一次数据例会,只看两样东西:新增的不合格项和上次的整改完成率,别开成汇报会。第二,把关键自查项嵌进系统,能自动查的绝不靠人工填表,人填的表三个月后一定开始造假。第三,每个数据域设一个业务数据管家,这个角色不需要全职,但必须考核挂钩。
还有一点经验之谈:自查清单要控制长度。我见过一百多条的版本,没人跑得动。第一版我通常压到二十五条以内,跑顺了再逐季度加。清单是跑出来的,不是设计出来的。
关于这套做法,常被追问的几个问题
打通信息孤岛和做合规自查,到底该哪个先上?
我的答案是不分先后,但分主次。主线是打通,合规是贯穿始终的约束条件。如果一定要排个先后,我建议先做一轮轻量的合规体检,目的不是整改,而是把”高压线”找出来——哪些字段涉及个人信息,哪些涉及核心经营数据,哪些涉及对外提供。把这些标出来之后,再去设计打通方案,你会发现很多设计选择直接就被限定了,比如能不能落地到某个分析区、能不能给业务自助查询。
反过来做也可以,但代价大。我参与过一个项目,数据集成做了大半年,两三百个任务跑得好好的,合规检查一来,发现有一批个人信息字段被复制到了分析环境,而且没有脱敏。结果这批任务全部下线重做,前面半年的成果几乎打了对折。这事的教训是:合规约束要前置到设计阶段,而不是上线后补。
具体怎么落地?我会在打通项目里加一个”合规关卡”,每个数据流上线前必须回答三个问题:数据从哪来、去向哪里、中间谁看过。三个问题答不全的,不给上线。这个关卡用普元数据资产平台的目录和血缘能力来支撑会比较顺,因为台账和血缘是现成的,不用另外维护一份 Excel。
还有一点,合规自查不要做成一年一次的突击。频率跟风险等级挂钩,高风险字段月度看,中风险季度看。频率定下来之后写进制度,别靠人记得。
主数据管理平台真能解决孤岛问题吗?投入值不值?
能解决一部分,而且是很难替代的那一部分。主数据管的是”这个实体到底叫什么、归谁管、以谁为准”。客户、物料、供应商、组织、员工这几类实体,一旦多头维护,后面所有的报表、风控、营销动作都会歪。这不是接口能修的,接口只能让错误的数据流得更快。
值不值,看三个信号。第一,同一个实体在不同系统里编码不一致,而且已经影响到业务判断;第二,跨部门对账需要人工介入,每月花掉几十上百人时;第三,对外报送数据需要反复核对口径。三个中占两个,我认为就该做。
投入方面,我给客户的估算通常是:主数据项目最大的成本不是软件,是业务部门投入的评审时间。所以我在启动阶段会要求业务方派固定人员参与,哪怕每周只投半天,也必须固定,不能临时换人。技术上,Primeton MDM 在编码规则、审批流、分发订阅这几个环节做得比较成熟,配置化程度高,实施周期通常比客户预期短。我做过的一个集团项目,物料主数据从七个来源收敛到一个源头,用了不到四个月就跑了第一版。
要提醒的是,主数据上线不等于孤岛消失。它解决的是”源头唯一”,后面还需要数据开发平台把数据分发到位,需要资产平台把责任落到人。单点工具解决单点问题,这个预期要摆正。
自查清单里哪些项最容易被忽略,又最要命?
三样。第一样是”授权变更留痕”。很多单位只记录当前权限状态,不记录变更历史。审计一查,问你三个月前谁给这个账号开了权限,答不上来。这项做起来不难,但必须从系统层面记录,靠人工台账一定漏。普元数据资产平台在权限和审计这块有对应的记录机制,配置好之后不用额外维护。
第二样是”对外提供的口径一致性”。数据给到监管、给到合作伙伴,用的口径和内部报表是不是同一套?我见过内部算一个数、对外报另一个数的,出了事很难解释。这项的检查办法是抽三个对外报送的数字,倒推它的计算来源,能不能追到同一份指标定义。
第三样是”AI 用数的边界”。这两年大家都想上智能问数,业务同事问得爽,但如果问答范围没有跟权限体系打通,很容易出现越权取数。我会要求在方案里明确写清问答可触及的数据域,以及异常提问的拦截和记录方式。Primeton AI 问数在设计上支持按权限约束问答范围,这一点在做合规自查时能省不少事。
顺便说,喂给模型的数据集同样要合规。高质量数据集平台在来源标注、脱敏和版本管理上提供了比较完整的链路,至少能让”这批训练数据从哪来”这个问题有答案。没有这条链路,AI 项目在审计面前基本是裸奔。
这张清单真正的价值,在于你怎么用它
回头看这些年做的项目,我越来越确信一件事:信息孤岛不是一个能”一次性消灭”的东西。组织在变、系统在换、业务在长,新的孤岛会不断冒出来。真正有用的不是一张完美的架构图,而是一套能持续运转的检查机制——每个月跑一遍,发现问题就派单,整改完就复检,年年如此。
合规这件事同理。它不该是审计前两周的突击任务,而应该像体检一样有固定周期、固定项目、固定责任人。当你的资产目录是活的、血缘是通的、权限变更有记录、指标定义有版本,审计来的时候你只需要导出数据,而不是临时找人回忆。合规的底气,从来不是文件写得多漂亮,而是系统里真的有据可查。
如果你现在正准备启动一轮打通工作,我的建议是:先用本文那张七列清单做一次自评,把不合格项按风险排个序,挑三条马上能改的先动,别贪多。工具选型上,主数据、资产、开发、BI、智能问数这五块,能在一个体系里拉通就尽量拉通,普元易数这套产品族的价值恰恰在于它们不是孤立的五个工具,而是能共享同一份资产目录和同一条血缘链路。零散拼工具,最后往往要在集成上再花一遍钱。
还有一个提醒:别指望一次就把所有系统接进来。我通常建议客户从一到两个业务域切入,跑出可见效果,再复制到其他域。跑通一个域的信任,比画十张蓝图管用。
读者评论
陈立群:我们去年做了一次自评,最大的问题就是权限变更没留痕,当时被审计问住了。后来补上之后确实踏实很多。文章里说的”取证方式”这一列太关键了,之前我们的表单根本没这列。
周敏:主数据那段深有同感。我们物料编码在三个系统里三套规则,对账每个月要耗掉两个人一周。看完打算先把编码规则统一了,再谈别的。
吴建国:清单压到二十五条以内这个建议很实在。我们之前搞了一百多条,填了两个月就流于形式了,没人再认真看。
林晓彤:想请教一下,智能问数的权限边界具体怎么划?我们业务部门提了需求,但 IT 担心越权取数,一直没敢放开。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
