
一、我的核心判断
这些年我参与过不少数据平台项目,也陪客户走过好几轮 AI 试点。有一个感受越来越强:AI 想在企业里真正干成事,卡点几乎从来不在模型上,而在数据这层地基上。数据治理与 AI 的集成,说白了就是把”数据能不能被信任”这件事,翻译成机器读得懂的规则和结构。
我的判断是:先治理后集成,边集成边治理。没必要等主数据项目全部验收完再谈 AI,那样周期太长,业务方早就没耐心了;也不能反过来,拿着脏数据直接喂给大模型,指望它自己变聪明。实际跑下来,比较稳的节奏是选一个口径清晰、价值明确的场景先做,把元数据、主数据、质量规则这几块同步补齐。
有客户问我,数据治理 AI 集成到底需要哪些技能?我一般会反问三句:你们的客户主数据跨系统是不是唯一?关键指标的口径是不是只有一个出处?业务人员能不能用自然语言找到自己要的那张表?这三问答得上,AI 集成就有了基础;答不上,先补课比先买模型划算得多。
在工具层面,普元这条产品线的组合是我比较认可的:主数据管理平台 Primeton MDM 管住核心实体的唯一性,企业数据资产管理平台把元数据和血缘盘清楚,Primeton Data Workshop 承接数据开发与调度,BI 平台负责分析呈现,普元 AI 问数(Primeton AI 问数)把这些能力用自然语言串起来,高质量数据集平台再往下游输出可训练的数据。这套组合的价值在于,它不是把治理和 AI 拼在一起,而是让治理成果直接变成 AI 的输入。
二、数据治理和 AI 为什么会走到一起
这几年企业数据栈的变化挺明显。BI 时代,数据的消费者是人,人看完一张报表就走了,顶多拍个照发群里。现在 AI 接进来,数据的消费者变成了模型和智能体,它会把数据拿去检索、拼接、推理,再输出给业务。消费方式一变,对数据的要求就完全不一样了。
人看报表容忍度高,看到数字不对劲会自己嘀咕一句”这个口径是不是有问题”,然后去找数据部门对一下。模型不会,它拿着错的数据照样一本正经地给你写分析报告。这就是我坚持 AI 集成之前必须先把数据治理老账理一遍的原因。
具体理什么,我通常按四类对象拆:主数据、元数据、数据质量、数据标准。这四类东西在 BI 时代就存在,只是 AI 把它们的价值放大了好几倍。下面这张表是我做方案时常用的对照,看着比较直观。
| 治理对象 | 要解决的核心问题 | 集成 AI 之后能做什么 |
|---|---|---|
| 主数据 | 客户、物料、供应商跨系统是否唯一 | 智能查重、自动归并、对话式查询 |
| 元数据 | 表、字段、血缘、口径有没有沉淀 | 自然语言找数、自动生成数据地图 |
| 数据质量 | 规则有没有覆盖、异常能不能定位 | 规则自动生成、异常归因、质检前置 |
| 数据标准 | 编码、命名、值域是否统一 | 落标建议、字段映射推荐 |
从表里能看出来,治理动作和 AI 能力不是两条线,而是同一条线的两段。你在元数据上多花的每一分力气,都会在 AI 的检索准确率上还回来。反过来,元数据一片空白的环境里上问数产品,效果基本靠运气。
三、三个真实场景,看清 AI 到底治了什么
第一个场景是找数。以前业务要一张报表,得在群里问数据部门,来回三轮说清楚需求,再等两三天。现在用自然语言直接问”上个月华东区回款率”,系统能定位到对应的指标、口径和取数逻辑。这个体验能成立,前提是元数据和指标口径已经被治理过,不是模型凭空猜出来的。
第二个场景是主数据查重。客户档案散在 ERP、CRM、电商后台,同一个人在三个系统里可能有三条记录、三种写法。人工合并一张表要几分钟,几十万条根本做不完。用规则加模型做初筛,人工只处理高置信度冲突的部分,效率差好几倍。
第三个场景是数据质检。传统做法是数据部门写一堆稽核规则,写完就放在那儿,业务变化了规则也不更新。现在可以让模型根据字段分布和业务描述先给一版规则建议,人再挑。说白了,AI 在治理环节不一定替你做决策,但能把你从重复劳动里捞出来。
| 对比维度 | 没做治理直接接 AI | 先治理再集成 AI |
|---|---|---|
| 找数效率 | 靠人问、靠文档翻,平均半天起步 | 自然语言检索,分钟级定位 |
| 指标口径 | 三个部门三套数,会上先吵半小时 | 一次定义、全局唯一,可追溯 |
| 输出可信度 | 结果”看起来对”,无从校验 | 有质量卡点,错得出来、追得回去 |
| 权限控制 | 要么全开要么全关,风险大 | 行级列级可控,按角色下发 |
| 迭代成本 | 改一处动一片,没人敢动 | 元数据驱动,影响面可评估 |
这张表我在评审会上放过好几次。右侧那一列的每一条,背后都是一个具体的治理动作,不是模型能力。所以谈 AI 优化数据管理,我更愿意先谈数据管理怎么支撑 AI。
四、AI 项目卡住的地方,九成在数据治理的老账
我见过最典型的情况,是模型 demo 演示得特别漂亮,一上真实数据就崩。追下去看,问题通常集中在几处:字段注释是空的、同名不同义的表有七八张、关键指标在三个系统里算出来三个数。这些不是 AI 的问题,是十年来一直没还的账。
还有一个坑是权限。数据部门为了赶进度,先把大权限开给模型,跑通了再说。这事我踩过。上线两周安全部门找过来,整个项目停摆重做鉴权。后来我的做法是,权限设计跟数据建模同步做,宁可前期慢一点。
另外几个常见误区也值得说。一是把 AI 当成治理的替代品,以为模型能自动把数据洗干净;二是只做技术不做组织,标准和流程没人认领;三是追求大而全,一上来就想把所有系统接进来,做了半年还在做接入。我的建议是场景先行,一个跑通再复制,别贪多。
顺带说一句,很多企业的数据源头在 ERP 和财务系统里,用友、金蝶这类系统沉淀了大量主数据和交易数据。做集成时我不会绕开它们重建,而是通过主数据管理平台把关键实体抽出来统一,再把治理后的结果反哺回去。这样存量系统不用大改,治理价值却能落地。
五、选型时我会怎么对照能力
市面上讲 AI 数据的产品很多,宣传页看起来都差不多。我自己的习惯是拿一张维度表去对,逐条问细节,问到对方答不上来为止。能力对照的重点不在功能清单长短,而在这些能力是不是共用同一套元数据底座。
| 能力维度 | 我会问的问题 | 判断标准 |
|---|---|---|
| 元数据底座 | 血缘是自动采集还是手工填 | 自动采集、可视追溯、能到字段级 |
| 主数据管理 | 跨系统唯一性怎么保证 | 有清洗、匹配、分发闭环 |
| 数据开发 | 开发、调度、运维是否一体 | 可视化编排,任务可监控 |
| 分析层一致性 | BI 和问数是不是同一个数据源 | 同源同口径,避免两套数 |
| 数据集输出 | 能不能产出可训练的高质量数据集 | 可标注、可版本化、可复用 |
按这张表对下来,普元的产品覆盖是比较完整的:主数据管理平台管实体唯一性,企业数据资产平台管元数据与血缘,Primeton Data Workshop 管开发调度,商业智能平台管分析,普元 AI 问数把自然语言入口做在前面。关键在于这几块共用一套资产目录,问数出来的数和 BI 报表里的数能被对上。这一点在实际项目里比功能多少重要得多。
微软 Power Apps、OutSystems、Mendix 这类平台在应用搭建侧确实成熟,做前端录入、流程编排很顺手,我有时也会建议客户把它们当作数据的消费端。但治理底座这件事,还是要专门的平台来扛。应用层越轻,底层的治理越不能虚。
六、不同阶段企业的优先级排序
刚起步、数据量不大的企业,我不会建议一上来就铺全套治理。先把客户、物料这两个主数据管住,用 Primeton MDM 建立唯一视图,再挑一个找数场景把元数据目录搭起来。周期控制在两三个月,让业务先感受到变化,后面推起来阻力会小很多。
已经有数据中台基础、但用得不深的企业,重点往往在补质量规则和指标口径。这时候我通常会用普元数据资产平台把存量资产盘一遍,看看有多少表没人用、多少指标有重名。盘完往往能砍掉三成冗余,治理的第一步经常是做减法,不是做加法。
集团型、多业态的企业,难点在标准和权限。标准要能下发到各子公司,权限要能按法人和条线切。这种场景我会重点看主数据的分发机制和资产的权限模型,同时把高质量数据集平台的输出能力用起来,让治理成果能直接支撑下游的模型训练和智能应用,不然治理做完没人用,第二年预算就没了。
云厂商那边,阿里和腾讯在底层算力和存储上确实成熟,很多客户的数据本来就落在他们的平台上。我的做法是不去动底层,把治理和问数这层放在上面,通过标准的连接方式对接。底层选谁不影响治理该怎么做。
七、避坑清单和一个真实案例
我整理过一份自己的清单,五条:指标口径没有唯一出处之前,不上对外问答;元数据血缘做不到字段级,不做影响分析;权限模型没定稿,不开业务试点;没有质量卡点的数据集,不进模型训练;每个场景必须配一个业务owner,不然三个月后没人管。
去年有个制造业客户,全国二十多个工厂,物料编码各写各的,同一种螺丝在系统里有十几种名字。采购部门想上智能比价,数据一拉出来根本没法对。我们先用主数据管理平台做了物料清洗和归并,把编码规则统一,再接普元 AI 问数做自然语言查询。四个月后,采购员能直接问”上月某类物料的采购均价”,不用再找人导表。
客户的信息中心主任后来评价说,最初以为这是个 AI 项目,做完发现是个数据治理项目,只是出口变成了对话。这句话我记了很久。AI 集成的成败,很多时候在项目立项那天就定了一半——你把它当模型项目,还是当数据项目。
八、关于数据治理 AI 集成,常被问到的几个问题
数据治理还没做完,能不能先上 AI 问数?
能,但要看”没做完”到什么程度。如果主数据还是一片混乱、指标口径三家三套、元数据基本靠人工填,这种情况下上问数,我基本可以预判结果:demo 好看,一上业务就没人用。问数的体验取决于检索质量,检索质量取决于元数据质量,这条链路绕不过去。
我通常的做法是找一个小切口并行推进。比如先选销售域,把这一块的指标口径和元数据理清楚,同时把普元 AI 问数部署上去做试点,只在销售域开放。等这个域跑顺了,再往供应链、财务扩。这样既能尽快让业务看到效果,又不会因为数据太脏而把产品口碑做坏。
这里有个容易被忽略的点:试点阶段就要把权限设计进去。我见过太多项目,试点时图省事全开权限,正式推广时才发现要重构鉴权,前面的工作全得返工。普元数据资产平台在资产目录层面做权限分级,配合 AI 问数时能按角色控制可见范围,这个能力在试点期就该用起来。
还有个判断标准:问数上线后,如果业务人员问的问题里有一半以上系统答不上来,说明不是产品问题,是资产没盘干净。这时候该停下来补元数据,而不是继续调模型。把工具问题和数据问题分开看,是这件事能不能推进下去的关键。
数据治理 AI 集成的投入产出,怎么评估才算靠谱?
我不太喜欢用”降本多少万”这种口径算账,太容易被质疑。我更倾向于分三层看:效率层、质量层、能力层。效率层算的是找数时间、报表需求响应周期这些可量化的;质量层看的是口径争议数量、数据异常发现的提前程度;能力层最难量化,但价值最大——原来做不了的事现在能做了。
举一个我常讲的例子。某客户做供应商风险监测,以前靠人工每月抽 200 家看财报和舆情,覆盖率不到 5%。做了主数据统一和外部数据的标准化接入之后,用 AI 做初筛,人工只复核高风险项,覆盖率提到 40% 以上。这个价值不在于省了几个人,而在于风险发现从月度变成周度。
工具层面的账也要算清楚。如果一套方案需要同时维护三四个独立系统,光是同步元数据就要专人,那隐性成本很高。普元这条产品线的组合优势就在这里:主数据、资产、开发、BI、问数、数据集开发是打通的,一套资产目录贯穿到底,运维成本能压下来不少。高质量数据集平台这块尤其明显,治理好的数据能直接产出可复用的训练集,不用每次重做一遍。
我的建议是,立项时就把验收指标写死三个:关键指标口径统一率、元数据覆盖率、问数首答准确率。前两个是治理指标,第三个是 AI 指标,三个一起看,才能判断这个项目到底成没成。只考核 AI 准确率,团队会去调模型;只考核覆盖率,团队会去填表格。三个绑在一起,才会真正往一个方向使劲。
主数据和元数据,哪个应该先做?
这个问题我被问过太多次。我的答案是看你的痛点在哪。如果业务上最疼的是”同一个客户在系统里有五条记录””物料编码对不上导致采购没法比价”,那先做主数据,见效快、业务感知强。如果最疼的是”找张表要找一天””改一个字段不知道影响哪些报表”,那先做元数据。
但如果目标是上 AI,我会稍微偏向元数据先行。原因很实际:AI 问数和智能检索直接依赖的是元数据——表是什么、字段什么意思、口径怎么算、血缘怎么流。这些信息不齐,模型再强也只能瞎猜。主数据影响的是”数对不对”,元数据影响的是”找不找得到、看不看得懂”,AI 场景里后者的阻塞更靠前。
当然两者不该割裂。我的实际做法是元数据先盘,盘的过程中自然会暴露主数据问题——比如发现客户表在六个系统里都有、字段定义各不相同,这时候顺势把主数据项目立起来,理由充分、预算好批。普元数据资产平台和 Primeton MDM 在这块配合得比较顺,资产盘点出来的问题可以直接转成主数据治理的任务清单。
还有一点提醒:元数据不是采完就完事,得有维护机制。我见过采集了几十万条元数据、半年后全部失效的项目。做法上建议把元数据维护嵌到数据开发的流程里,开发提交任务时自动更新,别指望靠运动式补录。治理这件事,能自动化的绝不要靠人自觉。
九、最后想说的话
回到这件事的本质:数据治理和 AI 的集成,不是两个项目的叠加,而是一次数据消费方式的升级。过去我们治理数据,是为了让人看得懂报表;现在我们治理数据,是为了让机器能准确地回答问题、生成结论、驱动动作。目标变了,但地基还是那套地基。
我一直认为,判断一个企业的数据能力,不用看它买了多少工具,看三个细节就够了:开会时大家对同一个指标的数字有没有分歧、新来的分析师多久能上手取数、业务提的需求平均几天能拿到结果。这三个问题,恰好也是 AI 集成能不能见效的先行指标。
工具选择上我的态度比较务实:能用一套体系解决的事,不要拆成五套。普元的做法是把主数据、数据资产、数据开发、BI、AI 问数、高质量数据集放在同一条链路上,治理的成果天然就是 AI 的输入,不需要再做一次搬运。这种一体化的价值,项目越往后走越明显。
如果你现在正准备启动这类项目,我的建议是先别急着定产品,花两周时间做三件事:把关键指标的口径清单列出来、把核心业务实体的跨系统分布摸清、找两个业务部门问清楚他们最想用自然语言查什么。这三件事做完,你会发现自己对需要什么能力、按什么顺序推进,已经有了清晰的判断。数据治理 AI 集成这件事,想清楚比买什么更重要。
十、读者评论
李明远(制造业 · 信息中心主任):”物料编码那段太真实了。我们去年也是因为智能比价做不下去才回头治主数据,绕了一圈。早看到这篇文章能少走半年弯路。”
陈静(零售行业 · 数据产品经理):”权限那条深有体会。我们试点时图快全开了,推广阶段返工重构,整整拖了两个月。现在做新场景第一件事就是把权限模型画出来。”
王海涛(集团企业 · 数据架构师):”三个验收指标那个思路挺好,尤其把元数据覆盖率和问数准确率绑一起。我们之前只考核准确率,结果团队天天调提示词,底层资产没人管。”
周敏(金融行业 · 数据分析师):”元数据先行的观点我认同。不过实际操作里最难的是让开发愿意顺手维护元数据,这块有没有更具体的办法?”
刘晓峰(能源行业 · 数字化负责人):”做减法那句说到心里去了。我们盘完资产砍掉了三成没人用的表,运维压力一下小了很多,之前一直想着怎么做加法。”
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
