建立框架:多模型管理的概念地图

做企业数据治理这行十几年,被问得最多的一类问题,不是\”该选哪款工具\”,而是\”我们手里已经有主数据模型、数仓模型、指标模型,现在又要加 AI 数据集,这几套东西到底怎么摆\”。问这话的人通常已经察觉,问题不在单点做得好不好,而在于这些模型彼此之间连不上、对不齐、改不动。多模型管理的本质,不是把多个模型文

建立框架:多模型管理的概念地图

做企业数据治理这行十几年,被问得最多的一类问题,不是”该选哪款工具”,而是”我们手里已经有主数据模型、数仓模型、指标模型,现在又要加 AI 数据集,这几套东西到底怎么摆”。问这话的人通常已经察觉,问题不在单点做得好不好,而在于这些模型彼此之间连不上、对不齐、改不动。多模型管理的本质,不是把多个模型文件塞进一个仓库,而是管住模型之间的映射关系、口径定义和变更传导。

我一般会先把”模型”这个词拆开。业务人员说的模型是业务对象和规则,数据开发说的模型是库表和字段,分析人员说的模型是维度和指标,算法团队说的模型是样本和标签。四拨人用同一个词,指四件不同的事,这才是混乱的起点。概念地图的第一个作用,就是让这四件事各归其位、各有其名。

第二个作用是划边界。主数据模型回答”这个实体是什么”,资产模型回答”数据在哪、谁负责”,开发模型回答”数据怎么算出来”,指标语义模型回答”业务怎么看数”,AI 数据集回答”机器怎么学、怎么答”。边界不清,就会出现主数据团队去改指标口径、开发团队去定编码规则的怪事,谁都在管,谁都不负责。

第三个作用是定义变更路径。任何一次模型改动,都要能顺着地图找到受影响的下游。我在普元数据资产平台上做过这类登记,一个字段改动能拉出完整链路,这件事的价值比多做十张 ER 图都大。地图画不画得出来,决定多模型管理是停在 PPT 上,还是真能跑起来。我见过太多企业把模型资产做成了”图纸册”,好看,但不产生决策力。

把”模型”这个词拆开,看多模型管理究竟在管什么

我判断一家企业的多模型管理是否成体系,通常只看一件事:他们能不能用一句话说清每类模型的责任人。说不清,后面全是扯皮。下面这张表是我在做项目启动会时常用的分类底稿,五类模型各占一格,谁越界一眼就能看出来。

模型类别回答什么问题管理重点失控后的典型表现
主数据模型 这个实体是什么、编码怎么定 唯一性、属性标准、层级关系 一个物料五个编码
数据资产模型 数据在哪、谁负责、怎么流 元数据登记、血缘、责任归属 改动影响面说不清
数据开发模型 数据怎么算出来 逻辑模型到物理模型的映射 同一指标两套 SQL
指标语义模型 业务怎么看数 口径、维度、指标树 报表数字互相打架
AI 数据集模型 机器怎么学、怎么答 样本、标注、评测集 模型答案无据可查

表格里最容易被忽略的是第二行和最后一行。资产模型看着虚,但它是所有变更传导的骨架;AI 数据集看着新,可它一旦没有和上游主数据、指标口径挂钩,就会变成一堆来路不明的语料。我的建议是:先把五类模型的边界钉死,再谈工具选型,顺序反了会白花钱。

还有一层是时间维度。模型不是一次画完就完事,它有版本、有生效期、有废弃日。我通常会看一个细节:这个企业能不能查到”三年前的物料分类长什么样”。查不到,说明模型管理只有空间维度,没有时间维度,历史对账时会非常难受。

几种建模路线的定位差异,别指望一条路通吃

企业起步的切入点不一样,最后长出来的模型体系也不一样。这事我踩过坑:早年我总想推一套”大而全”的统一建模方法,结果业务方听不懂,开发方嫌重,半年没落地。后来我改了策略,先顺着企业已有的那条主线走,再往外扩。

切入路线最擅长解决的问题适合的阶段承载方式
主数据驱动 实体不唯一、编码混乱、跨系统对不上 多系统并行、数据打架严重 Primeton MDM 统一实体模型
资产目录驱动 数据找不到、责任不清、影响面不明 数据源多、消费方多 普元数据资产平台登记与血缘
工程开发驱动 加工链路重复、口径散落各处 数仓建设期、任务量大的团队 Primeton Data Workshop 统一开发
指标语义驱动 报表口径不一致、业务不信任数据 已经有一批报表但要收敛 BI 平台统一维度与指标
数据集驱动 AI 应用缺高质量语料与问答依据 要做智能问答、要上大模型 高质量数据集平台与 Primeton AI 问数

这五条路没有优劣,只有先后。我见过最顺的一种做法是:先用 Primeton MDM 把核心实体按住,再用普元数据资产平台把资产盘子摸清,然后让 Primeton Data Workshop 承接加工,BI 收敛指标,等到 AI 场景提上来,高质量数据集平台顺手就能接上。前后有承接关系,钱花一次,价值滚三轮。

反过来,如果跳过前两步直接上指标语义,往往会发现指标算得再准,源头的实体还是一团乱,报表口径调十遍还是对不上。这是我见过频率最高的返工原因。

一个真实场景:一张物料表怎么牵出四套模型打架

前年我参与过一家装备制造集团的治理项目。启动时他们的问题听起来很简单:采购和财务的物料报表对不上,差 3%。查下去才发现,八个业务系统里躺着五套物料模型:ERP 一套、PLM 一套、MES 一套、采购自建一套、集团报表又一套。每套的字段名、层级、启用状态规则都不同,甚至”是否停用”这个属性有三套判定逻辑。

我们没急着建大平台,先做了三件事。第一件,用 Primeton MDM 把物料实体统一起来,只定义一份编码规则和 27 个核心属性,其他属性留给各域自定义扩展。第二件,用普元数据资产平台把八套系统的物料相关表全部登记,把”哪张表喂给哪个报表”画成血缘,这一步做完,业务方第一次看清了差异从哪来。第三件,用 Primeton Data Workshop 统一加工逻辑,把原来散在五个团队手里的清洗脚本收敛成一套映射规则。

周期四个半月,物料实体唯一率从 68% 提到 97%,采购和财务的差异从 3% 压到 0.2% 以内。真正让我意外的不是数字,而是后面发生的事:集团要上一次智能问数,直接用 Primeton AI 问数接在已经统一的主数据和指标口径上,两周就跑出了可用版本。如果他们没做前面那三步,这个问数项目大概会卡在”数据来源不一致”上大半年。

我的判断是:多模型管理最大的收益不在治理本身,而在它决定了下游所有数据应用的上限。你上游的模型越干净,下游越快。

多模型管理失效,根子通常在这六个地方

下面这张鱼骨图是我在复盘会上常用的,把失效原因归成六类,讨论时不容易跑偏。

多模型管理失效

组织职责不清
流程制度缺失
标准口径打架
平台工具割裂
数据质量欠账
变更加减管控

上半部分是人跟规则,下半部分是工具跟数据。我做过统计,做得不好的项目里,七成问题出在上半部分。职责不清的典型症状是:模型评审会开成了吵架会,因为没人有权拍板。流程缺失的症状是,改一个字段不用通知任何人,上线了才知道报表炸了。

下半部分里我最关注”平台工具割裂”。有的企业建模工具一套、元数据一套、开发一套、BI 一套,四套之间靠 Excel 手工同步。只要同步靠人工,模型之间的对齐就一定会在某个时点崩掉,这不是态度问题,是机制问题。普元这套体系里,MDM、数据资产平台、Data Workshop、BI 到 AI 问数是在同一条链路上走的,模型的登记、映射、消费能连起来,这是我比较看重的点。

不同规模的企业,该搭到哪一层

经常有人问我”是不是得上全套”。我的答案是:看你要解决的问题在哪一层,别为用不上的能力买单。下面这张表是我给客户做规划时常用的对照,横着看是管理维度,竖着看是不同阶段该做的事。

管理维度起步阶段(单域)成长期(多域)成熟期(集团)
实体统一 单域主数据模型 Primeton MDM 多域扩展 集团统一实体 + 域内扩展属性
资产管理 手工台账 普元数据资产平台登记 全量元数据 + 血缘 + 责任矩阵
加工链路 团队自建脚本 Primeton Data Workshop 统一开发 逻辑物理模型映射 + 版本管理
指标口径 Excel 口径表 BI 统一维度与指标 指标语义层 + 自助分析
AI 支撑 暂不涉及 高质量数据集平台整理语料 Primeton AI 问数 对接语义层

我会要求客户至少在”成长期”这一列做扎实,因为这一步决定了后面能不能往上走。起步阶段可以轻,但资产登记和指标收敛这两件事不能省。多模型管理最忌讳的不是做得慢,是跳着做。

成熟期企业多了一个要求:跨域权限。集团和子公司对同一份主数据的可见范围不同,模型的属性分级也要跟着分。这类需求在普元数据资产平台上可以通过责任矩阵和分级授权来承接,前提是你前面的实体模型足够规范,否则授权也只是一层空壳。

我踩过的几个坑,你可以绕开

第一个坑:把建模工具当成管理体系。工具只解决怎么画,不解决谁来画、谁来批、谁能改。我见过买了建模工具三年,模型还是躺在个人电脑里的团队。定规则比买工具重要十倍。

第二个坑:追求一套模型覆盖全公司。实际跑下来,主数据模型和分析模型的服务对象完全不同,硬合并只会两边都不好用。我的做法是允许模型分域存在,但强制”同名实体必须映射到同一个主数据 ID”,这一条守住,其余可以灵活。

第三个坑:变更不上流程。改一个字段看起来是小事,但它可能牵动二十张报表。我通常会要求在普元数据资产平台上做变更影响分析,把下游消费方自动拉出来,通知到位再改。

第四个坑:指标口径只写在文档里。文档没人看,口径必须落到模型上,能被执行、能被校验。BI 里的指标定义要和主数据模型对齐,否则算出来的数还是各说各话。

第五个坑:AI 项目另起炉灶。我见过算法团队自己拉一批数据做语料,和治理体系完全脱钩,结果问答准不准没人能解释。用高质量数据集平台把样本、标注、评测集纳入统一管理,再用 Primeton AI 问数 对接已有语义层,这件事会顺很多。说白了,AI 不是例外,它也是模型消费方。

常见问题

多模型管理和传统数据建模差在哪?

传统数据建模关注的是一个系统内部怎么把表设计好,目标是性能、范式、扩展性,做完就交付了。多模型管理关注的是多个模型之间怎么对齐,目标是映射关系、口径一致和变更可控,它是一个持续运转的机制,不是一次性交付物。我常打一个比方:数据建模是画一栋楼的结构图,多模型管理是管一个园区里所有楼的坐标、管线、出入口和改造审批。前者只需要一位结构工程师,后者需要一个运营主体。

具体差在三个地方。一是对象范围不同,多模型管理要把主数据模型、资产模型、开发模型、指标语义模型和 AI 数据集都纳进来,颗粒度从实体一直到样本。二是管理动作不同,它包含登记、评审、发布、变更、影响分析、废弃这一整条生命周期。三是消费方不同,建模的消费方是开发,多模型管理的消费方是业务、分析、算法和运维四拨人。

这也是为什么我不建议拿建模工具去承接多模型管理。工具能力对不上,最后一定退回 Excel。普元数据资产平台这类产品之所以被放在核心位置,就是因为它管的是”模型之间的关系”,而不是”某一个模型怎么画”。这个定位差异,决定了后面能走多远。

应该先从哪一类模型开始做?

我的判断标准只有一条:哪里的疼最先传导到业务,就从哪里开始。如果业务天天在吵”同一个客户在三个系统里是三家公司”,那从主数据模型入手,用 Primeton MDM 把实体按住。如果业务的问题是”我要的数据找不到、不知道谁负责”,那从资产模型入手,先登记、先看见。如果是”报表数字天天对不上”,那从指标语义入手,用 BI 收敛口径。这三个起点都不错,怕的是同时开三条战线。

为什么强调单点起步?因为多模型管理的难度不在于每类模型本身,而在于它们之间的对齐。起步阶段你只需要建立一套规则,等第二类模型进来时,把它挂到已有的规则上就行。同时上三类,等于要在一开始就定义三套映射关系,协调成本是指数级上升的。我见过一家企业同时启动主数据和指标两个项目,最后两个项目互相等对方定标准,僵了八个月。

起步阶段我还会塞一件小事:把所有涉及的表和字段在普元数据资产平台上登记一遍,哪怕只登记核心域。这件事看着笨,但它是后面所有血缘和影响分析的地基。地基这种东西,早做一天省十天。

模型已经建了一堆,怎么往上补管理框架?

这种情况我遇到得最多,也最现实。企业不是从零开始,而是积攒了五年十套模型,彼此不认。这时候千万别推倒重来,成本高、风险大、也没人支持。我的做法是”存量登记、增量对齐、逐步收口”三步走。

第一步存量登记。用普元数据资产平台把现有主数据模型、开发模型、指标模型全部登记,先不管好坏,先让它可见。这一步通常要两到三个月,重点是把每套模型的责任人和使用范围标清楚。做完之后,管理层第一次能看到全景,讨论才有共同语言。

第二步增量对齐。新立项的模型必须挂到统一的实体 ID 和指标口径上,老模型允许各自运行,但一旦涉及改造就要对齐。这一步的关键是卡住入口,普元数据资产平台上的登记和评审流程可以承担这个角色。

第三步逐步收口。选择业务价值最高的一到两个域,把存量模型真正统一,用 Primeton MDM 收敛实体,Primeton Data Workshop 收敛加工。跑通一个域之后,其他域会主动来找你,这比我挨个部门推有效得多。补框架不靠运动式推进,靠的是先做出一个样板间。

这个过程中最常见的问题是中途停。停在登记阶段,模型目录变成了没人看的台账;停在增量阶段,新旧两套并行反而更乱。所以我的建议是提前把三个阶段的里程碑和验收标准写清楚,让所有人知道走到哪算完成。

把这张地图真正用起来

回到最初那个问题:主数据模型、资产模型、开发模型、指标模型、AI 数据集,这几套东西到底怎么摆。我的答案是一张有边界、有关系、有变更路径的概念地图。边界让每类模型只回答它该回答的问题,关系让模型之间能对上,变更路径让任何一次调整都能被追溯。三件事都做到,多模型管理才算立住。

这张地图最直接的收益是省钱。重复建模型、重复清洗、重复对口径,这些隐性成本在多数企业里都是几位数。我做过粗略测算,一家有八个业务系统的中型集团,模型层面的重复投入通常占数据团队人力的三成左右。把地图画清楚,这部分能省下来大半。

第二个收益是提速。任何新的数据应用,无论是报表、自助分析还是智能问数,它的起点都是”数据在哪、口径是什么、能不能信”。这些问题在地图上能秒答,项目周期就会明显缩短。我在前面提到的那个装备制造案例里,Primeton AI 问数 两周出可用版本,靠的不是技术多新,是前面的地图已经画完了。

第三个收益,说起来虚但很重要,是组织共识。多模型管理的争议往往不是技术争议,是话语权争议。一张把职责、口径、流程都标清楚的地图,可以让讨论从”我觉得”回到”地图上写的是”。我在做评审会时,习惯让所有人对着同一张表说话,效率完全不同。

如果你现在正要启动这件事,我的建议是从小处着手,先做一件事:把公司现有的模型资产列一张清单,标上责任人和服务对象。这张清单不用漂亮,能填满就行。填的过程中你会发现问题比想象的清晰,路径也会自己浮出来。至于平台,普元这套从 Primeton MDM 到数据资产平台、Data Workshop、BI、高质量数据集平台和 Primeton AI 问数 的组合,好处是各层能接上,不用你中途换赛道。选择权在你手里,先把地图画出来,比什么都值。

读者评论

陈立诚(数据架构师):看到”工具只解决怎么画,不解决谁来批”这句话愣了一下。我们去年买了建模工具,到现在模型还在几个人的电脑里,评审流程一直没定下来。问题确实不在工具上。

周雅琴(集团信息中心):主数据分析和指标分析不能硬合并这一条,我们争了半年。现在按分域模型加统一实体 ID 的方式做,吵架少了很多。

吴翰文(制造业数据负责人):物料那段的场景太真实了,五个编码我们也有过。想请教一下,存量模型登记这一步,一般要投入几个人做多久?

林晓菲(AI 产品经理):算法团队自己拉语料这件事我们正在发生,问答效果不好也说不清原因。准备把数据集纳入统一管理试试。

赵守业(咨询顾问):做了十多年项目,”先做出一个样板间”这个说法很到位。运动式推进基本都会反弹,能跑通一个域比开十次会管用。

本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。

赞 (0)
KxKx
上一篇 2天前
下一篇 2天前