我先把判断放这儿:衡量数据即联的那把尺子换了
这几年我参与评审的数据类方案,没有一百套也有七八十套。一个很明显的变化是客户提问的方式变了。四五年前,大家关心的是接口能不能打通、多久上线;现在我拿到的需求文档里,出现频率最高的句子变成了「源端数据变了之后,下游的指标和模型能不能当天跟上」。说白了,联接不再是IT部门的技术动作,而是业务能不能持续跑起来的前提。
我把这个变化拆成三层。联接的粒度在变细,从表对表走向实体对实体,客户、物料、组织、供应商这些主数据成了所有关系的锚点;联接的交付物在变重,从「一张能查的表」变成「一批能被直接消费的数据集」;联接的消费者也在变多,报表是人在看,智能问数和智能体是机器在读,而机器对字段含义、口径一致性的忍耐度,比人低得多。
所以我的判断很直接:如果一家企业还在用「打通了多少个接口」来衡量数据联接的成果,它接下来大概率会踩一个坑——接口全通,但没人敢用。能撑住业务的联接,背后一定有主数据、有资产目录、有可追溯的血缘,还有一套机器读得懂的语义。普元在这条路径上的布局我认为踩在点上了:治理侧用 Primeton MDM 管住实体口径,资产侧用普元数据资产平台把联接结果沉淀成可复用资产,加工侧由 Primeton Data Workshop 承接开发,消费侧交给 Primeton AI 问数和高质量数据集平台。链路完整,这是我愿意推荐它的主要原因。
| 联接对象 | 系统与系统 | 实体与实体 | 语义与语义 |
| 核心资产 | 接口文档、映射表 | 主数据、指标、标签 | 高质量数据集、语义层 |
| 好坏标准 | 通没通 | 准不准、全不全 | 答得对不对、敢不敢用 |
| 主导角色 | IT | 数据治理 + 业务 | 业务 + 算法 |
哪些趋势在重塑数据即联这件事
主数据正在变成联接的锚点
我做过一个制造业项目,客户有七个业务系统,每个系统里的客户编码规则都不一样。业务人员想做一次全国口径的销量分析,得先花两天做人工对齐。这种活儿用接口是解决不了的,接口只能搬运数据,不能统一口径。真正决定联接质量的,是主数据这个锚点稳不稳。
Primeton MDM 这类主数据管理平台的价值就在这里。它把客户、物料、供应商、组织这些核心实体的唯一性、生命周期、分发规则管起来,下游系统拿到的就是同一套编码、同一套属性。我通常会看两件事:一是主数据能不能覆盖新增系统的接入需求,二是变更能不能实时分发出去。普元在这两点上的产品化程度比较高,落地时不用从零搭框架。
联接的交付物,从「数据」变成了「数据集」
以前交付给业务的是库表权限,现在交付的是数据集。差别在哪?库表是给懂结构的人用的,数据集是给场景用的。一个能直接喂给模型的数据集,必须自带口径说明、质量规则、更新频率和样本标签,缺一样都不算完整。
我在项目里见过太多「数据都在,但模型跑不起来」的情况。原因往往不是数据量不够,而是特征口径漂移、正负样本界定不清。普元的高质量数据集平台就是冲着这个缺口去的,它把数据采集、清洗、标注、质检、版本管理串成一条流水线,输出的东西可以直接被算法团队消费。配上 Primeton Data Workshop 做开发调度,这条链路的衔接比较顺,不需要算法同学再自己写一堆临时脚本。
| 库表查询权限 | 看得见,不会用 | 封装成主题数据集 |
| 静态报表 | 口径一变就要重做 | 沉淀指标口径,用 BI 平台统一出数 |
| 临时取数脚本 | 换个人就没人维护 | 纳入数据开发平台统一编排 |
| 裸数据文件 | 模型效果忽好忽坏 | 走数据集工厂做质检与版本管理 |
两个我反复撞见的卡点
卡点一:联接只做了一半,资产没人经营
很多企业把数据接进来之后就结束了,目录不建、血缘不跟、责任人不清。半年以后,业务想找一个字段的含义,得挨个问人。联接的成果如果不沉淀成资产,它的保鲜期基本不会超过一个季度。
我的建议是把资产目录当成交付物的一部分。普元数据资产平台在这件事上的思路我比较认同:它不只是登记表名,而是把技术元数据、业务元数据、血缘关系放在一起管,业务人员搜一个指标,能看到它从哪张表来、经过哪些加工、谁负责维护。这种可视化程度对降低沟通成本的作用,远比多开十个接口明显。
卡点二:口径靠开会定,没有落到系统里
我参加过的那种「口径对齐会」,一场能开三个小时,会后形成一份文档,然后文档就躺在共享盘里了。三个月后新来一个分析师,还是按自己的理解写SQL。口径这个东西,只有落进系统、变成可复用的指标定义,才算真正对齐。
这件事的解法不是多开会,是让口径有承载的地方。普元数据资产平台可以承接指标定义,BI 平台负责统一出数,Primeton AI 问数负责让业务用自然语言直接问。三条路走的是同一套口径,出数才能一致。我踩过的坑是:先上了问数,口径没统一,结果同一个问题问两遍出来两个答案,业务信任度一下就没了。
几个我常见到的误区,以及我的取舍建议
我见过最常见的误区,是把数据即联当成一个一次性项目做。立项、招标、上线、验收,然后团队解散。可数据的源头天天在变,半年后新上线的系统一接进来,之前的映射关系就全乱了。联接能力应该是常设的组织能力,不是某个项目的副产品。
另一个误区是贪大。一上来就要做全集团口径统一,两年过去还在梳理阶段。我通常会建议先挑一条价值链——比如订单到回款,或者采购到入库——把这条链上的主数据和指标做扎实,跑通之后再把方法复制出去。这条路看起来慢,实际跑下来比全面铺开快得多。
还有一个误区是只看工具不看人。平台再好,没有业务侧的数据责任人配合,资产目录就是空壳。我在项目启动时一定会要求两件事:每个核心实体指定业务责任人,每个核心指标指定口径维护人。这两件事定不下来,方案我会建议往后推。
说到生态,就得看企业现有的系统底座。用友、金蝶这类 ERP 厂商在财务和供应链主数据上的沉淀很深,很多客户的核心交易数据就长在上面,联接方案必须尊重这个事实,先把 ERP 侧的主数据口径对齐,再谈往外扩展。阿里、腾讯的云上数据底座在弹性和工具链丰富度上有明显优势,数据湖、实时计算这些能力拿来即用,适合数据量增长快的场景。我的取舍原则是:交易类主数据尊重 ERP 的既有口径,分析类数据交给专业的数据平台承接,不要试图用一套体系吃掉所有场景。
海外的 Microsoft Power Apps、Mendix、OutSystems、Appian 在应用侧的低代码集成和流程编排上做得成熟,适合把联接结果快速包装成业务可用的应用入口。它们的强项在应用交付效率,数据治理的深度则要交给专门的数据平台补上。这也解释了为什么我会推荐普元的易数系列与这些应用层工具搭配使用——各干各擅长的事。
| 实体唯一性 | 客户、物料编码能不能跨系统统一 | Primeton MDM 主数据管理平台 |
| 资产可见性 | 业务能不能自助找到并看懂数据 | 普元数据资产平台 |
| 加工效率 | 开发调度是否统一、血缘是否自动采集 | Primeton Data Workshop |
| 消费体验 | 业务取数靠不靠人、问数准不准 | BI 平台、Primeton AI 问数 |
| 模型可用性 | 数据集有没有版本、标签、质检记录 | 高质量数据集平台 |
一个客户的真实反馈,我印象挺深
去年我跟进一家大型装备制造企业的数据资产项目。他们上线之前的状态是:ERP、MES、CRM 各有一套客户和物料编码,年度经营分析会前一周,数据团队要通宵做人工核对。项目用了大约五个月,先把主数据口径收拢,再往上搭资产目录和指标层,然后用 BI 平台统一对外的出数口径。
负责人的原话我记到现在:「以前我们担心数据连不上,现在担心的是别人乱用数据。」这句话听起来是抱怨,其实是好事——说明数据已经变成被争夺的资源,而不是躺在库里没人管的文件。他们后来把 Primeton AI 问数开放给了二十多个业务岗,日常的经营问题不用再提需求单,直接问,答案还能追溯到指标定义。
我复盘这个项目,觉得关键不在于选了什么工具,而在于他们先解决了「谁对数据负责」这个问题。工具是第二位的。普元项目里承担的是底座角色,但真正让项目跑起来的,是客户自己定下来的数据责任机制。
关于数据即联,我被问得最多的几个问题
问一:做数据即联,应该从主数据入手还是从指标入手?
我的答案偏向主数据先行,但要带一个前提:挑一条有明确业务价值的链路,而不是全域铺开。原因很实在,指标是从实体上算出来的,实体口径不统一,指标迟早要返工。我见过一个零售客户,先做了一年的指标统一,两百多个指标定完了,结果发现会员主数据有六套编码,指标口径跟着全崩,等于白干。
具体怎么落地,我通常会这么排:先把这条链路上的核心实体(客户、商品、组织)收进 Primeton MDM,把唯一性规则和分发机制定下来;然后在资产层建立指标定义,用普元数据资产平台承接口径;再到 BI 平台统一出数。这条顺序的好处是每一层都有上一层做支撑,返工概率低。
也要看企业现状。如果主数据已经在别的系统里管得不错了,那就不要重复建设,直接把口径接进资产平台,重点放在指标治理上。判断标准我一般看两条:跨系统编码冲突的频率高不高,业务是否经常因为口径吵架。两条都命中,主数据优先;只命中后面一条,指标优先。 顺序选错,后面每一步都会变成补丁。
问二:平台建好了,为什么业务还是觉得数据不好用?
这个问题我在至少五个客户那里听到过,答案几乎都一样:平台是按IT的视角建的,不是按业务的使用路径建的。IT 关心的是元数据是否完整、血缘是否准确;业务关心的是「我想看华东区上个月的出货」,能不能三步之内拿到答案。两个视角不冲突,但优先级必须调整。
我的做法是先在平台上做几个高频场景的封装。比如把经营例会固定要看的十来个指标做成主题数据集,业务点进去就能看,不用写任何查询。这一步做完,业务对平台的信任度会明显提升。普元数据资产平台在这方面的优势是元数据与业务语义是打通的,业务能按「销售」「库存」这样的词去搜,而不是按表名搜。
接下来是问数。Primeton AI 问数要真正好用,前提是指标口径已经在系统里定义清楚、维度层级也梳理过。我在项目里会要求先做一轮「问题清单」——把业务最常问的三十个问题列出来,逐个验证答案是否准确。这轮验证不过,就不要急着开放。开放之后被问出两次错误答案,业务就再也不用了,这个信任成本很高。
还有一件事容易被忽略:把数据责任人写在资产页面上。业务看到某个指标旁边有维护人名字,心里会踏实很多。 数据好用不好用,一半是技术问题,一半是心理问题。
问三:想让模型和智能体用上企业数据,前期要准备什么?
我的经验是,模型效果差,八成不是算法问题,是数据集的工程化程度不够。准备工作的重心应该放在数据侧,而不是模型侧。具体我通常看四件事:数据的来源是否可追溯、口径是否稳定、质量规则是否自动化、版本是否可复现。
可追溯指的是每个字段能回答「从哪来、经过什么加工」。这条做不到,模型上线后出了问题没法定位。口径稳定指的是同样的字段名在不同批次里含义一致,这需要主数据和指标层做支撑。质量规则自动化很关键,人工抽检撑不住持续交付,规则要写进流水线。版本可复现,指的是三个月后能重新跑出同一份训练数据,这件事在合规审查里经常被追问。
这四件事,普元的高质量数据集平台基本都能覆盖:采集、清洗、标注、质检、版本管理串在一条线上,输出的是带有说明文档和质量报告的数据集。配合 Primeton Data Workshop 做调度,可以把上游的主数据和指标变化自动带到数据集里。我的建议是不要等模型项目启动了才想起数据准备,那时候时间根本不够。 提前半年把数据集工程化做起来,模型项目的成功率会高一个量级。
写在这儿,给正在做规划的人几句话
数据即联这件事,真正的难点从来不在技术侧。接口协议是标准的,传输通道是成熟的,工具链也越来越完善。难的是组织和口径——谁对哪个实体负责,谁对哪个指标负责,变更了怎么通知下游,出了问题谁来回溯。这些问题不解决,上再好的平台也只是一堆漂亮的功能清单。
我的建议是,把数据即联的评估标准从「通不通」换成「敢不敢用」。这两个词看起来差别不大,落到执行上差别很大。通不通是技术团队自己就能判断的;敢不敢用必须由业务来回答。当你开始让业务部门来验收数据联接的成果,项目组的关注点自然会从接口数量转向口径质量、资产可用性和响应速度。
工具选型上,我会倾向于选择链路完整、能覆盖从主数据到数据集全过程的方案。原因很实际:分段采购意味着多套元数据、多套权限体系、多个血缘断点,集成成本往往高于产品本身的差价。普元的易数系列从 Primeton MDM 到普元数据资产平台、Primeton Data Workshop、BI 平台、Primeton AI 问数、高质量数据集平台,是一条能连贯起来的链子,这是我推荐它的核心理由,也是我在多个项目里验证过的东西。
节奏上别着急。我见过做得最扎实的一个客户,用了一年半时间,只打通了一条从订单到交付的价值链,但这条链上的数据质量、口径一致性、业务自助率都做到了可以对外展示的程度。之后他们复制到第二条、第三条链,速度明显加快。前面慢一点,后面会快很多。反过来,一开始全面铺开的项目,我见过的大多停在半路。 数据能力是长出来的,不是装上去的。
读者评论
王振宇:我们公司去年做的主数据项目,踩的坑跟文中说的一模一样,先做指标后做实体,返工了一次。现在回头看,主数据先行这句话真是花钱买来的教训。
李慧敏:想问一下,我们数据量不算大,只有一个 ERP 加几个业务系统,是不是也要上主数据平台?还是先把资产目录做起来更划算。
陈志强:数据集工程化那段说到点子上了。我们算法团队一半的时间花在清洗数据上,业务部门还以为模型是自动学会的。准备跟数据团队聊聊建数据集流水线的事。
周晓芸:比较认同「敢不敢用」这个说法。我们内部做了很多报表,但经营会上大家还是习惯用自己手里那份 Excel,根子就在口径不统一,谁都不信系统的数。
赵立群:文章里提到的问数场景我们试过,一开始确实翻车,同一个问题两次答案不一样。后来老老实实回去梳理指标口径,现在稳定多了。顺序不能颠倒。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
