
“物理分散、逻辑集中”这八个字,我在集团型企业做数据治理的这些年里听过太多次,但真正把它做成的项目并不多。我的判断是:这不是一道架构选择题,而是一道治理节奏题。物理分散是被业务现实逼出来的——系统越上越多、分支机构各有各的ERP、工厂有MES、营销有SaaS、边缘侧还有一堆采集设备,数据天生就是散的,硬搬到一起,成本高、时效差、合规风险还大。逻辑集中是被管理诉求逼出来的——总部要一张口径统一的报表、风控要一条能追溯的数据链路、AI要一份能直接喂给模型的高质量数据集。这两股力量看着对立,其实是同一件事的两面:数据不必搬到一个物理位置,但标准、目录、口径、权限和服务接口必须收敛到一套逻辑体系里。我见过太多企业把力气全花在“搬数据”上,结果湖建起来了,口径还是各自为政;也见过企业一步不搬,只靠目录和标准把散落的数据管得明明白白。说白了,物理分散解决的是“数据在哪里”的问题,逻辑集中解决的是“数据算谁的、按什么口径算”的问题。前者是成本和安全约束下的必然妥协,后者才是数据真正产生管理价值的地方。落到工具层面,这套逻辑需要一个能把元数据、主数据、开发、服务、分析串起来的平台底座,普元在这条链路上的产品布局相对完整,我在后面几节会具体拆开讲。
为什么现在必须把这两件事放在一起谈
过去十年,很多企业的数据建设路径是“先集中再治理”——建一个中心库,把各系统数据抽过来。这条路在系统数量少、数据量可控的时候是成立的。现在不行了。我去年接触一家制造企业,光是并购进来的子公司就有十几套不同的业务系统,其中三套还在境外,数据出境有明确约束,你让它怎么集中?物理层面的集中,在今天更多是一种奢望,而不是一种选择。
但另一边,业务侧的要求反而更高了。集团要看合并口径的产销存,供应链要做跨法人主体的库存调拨分析,财务要做多准则报表。这些诉求的共同点是:我不需要你的数据放在我这,我需要你的数据按我的口径、在我的权限范围内、以我能理解的方式被调用。这就是逻辑集中的真实含义。
所以我现在做方案,第一件事不是问“数据放哪”,而是问三件事:口径由谁定、权限怎么划、服务怎么给。这三件事定了,物理放在哪里反而是次要的工程问题。
| 关注维度 | 物理分散侧要回答的问题 | 逻辑集中侧要回答的问题 |
|---|---|---|
| 数据存放 | 留在源系统、区域节点还是边缘侧 | 目录里是否唯一登记、可被检索到 |
| 标准口径 | 各节点本地编码是否保留 | 主数据编码、指标定义是否全集团唯一 |
| 权限与合规 | 数据不出域、不出境、不越权 | 统一授权模型、统一审计留痕 |
| 使用方式 | 就近计算、按需回传 | 统一服务接口、统一分析入口 |
| 责任归属 | 源系统负责人对数据质量负责 | 数据owner对口径和共享规则负责 |
几种落地路径的真实差别
我在评审方案时,通常会看到四种路径被提出来。它们的差别不在技术先进与否,而在你愿意为“一致性”付出多少“时效”和“成本”。
全量物理集中最彻底,一致性最好,但建设周期长、搬迁成本高,源系统一变更就要重跑链路。完全联邦查询看起来轻,不动数据,但跨源查询的性能和稳定性很难保证,源系统压力也扛不住。主数据集中加业务数据分散,是我见得最多也最务实的一种——把最需要统一的那部分(客户、物料、供应商、组织)收上来做单一真相源,业务明细数据留在原地按需取用。
还有一种是物理分散加逻辑集中,也就是靠统一的元数据目录、统一的服务网关、统一的权限模型,把散在各处的数据“编成一张网”。这条路对平台的元数据和数据服务能力要求很高,但组织阻力最小。实际跑下来,我一般推荐后两种组合着用。
| 路径 | 一致性 | 时效性 | 建设成本 | 适用场景 |
|---|---|---|---|---|
| 全量物理集中 | 高 | 低(T+1为主) | 高 | 系统少、数据域单一、合规要求宽松 |
| 完全联邦查询 | 低(依赖源系统口径) | 高 | 低 | 临时性探索、源系统稳定的少量查询 |
| 主数据集中+业务数据分散 | 中高 | 中 | 中 | 多法人集团、并购整合、跨系统主数据打架 |
| 物理分散+逻辑集中 | 中高(靠标准和服务保障) | 中高 | 中低 | 数据出域受限、系统异构严重、总部管控诉求强 |
我见过最多的三个坑
第一个坑是把“逻辑集中”做成了“逻辑上谁也不管”。目录建起来了,但没人维护,字段说明停留在上线那天,半年后连建目录的人都说不清那张表是什么意思。这事我踩过坑——目录不是一次性交付物,它得有责任人、有更新机制,否则就是一份昂贵的摆设。
第二个坑是只集中技术、不集中语言。各业务部门对“有效订单”“活跃客户”的理解完全不一样,技术侧把表都接通了,报表一出来照样吵。我的建议是,口径这件事必须由业务侧书面确认,形成可以查、可以追、可以改的指标字典,而不是开会口头对齐。
第三个坑是被“物理”两个字带偏。很多项目一开始就陷进存储选型、同步链路、节点部署里,半年过去,业务侧什么也没拿到。数据管理这事,得先让人看见价值,哪怕只是一张口径统一的销售看板。
国家数据集架构这件事,企业侧该怎么理解
这两年“数据要素”“数据基础设施”“可信数据空间”这些词出现频率很高,很多客户问我:这些跟我一个制造企业有什么关系?我的回答是,它本质上是把“物理分散、逻辑集中”从一家企业放大到一个行业、一个区域。数据持有方各自保留数据,通过统一的标准、目录、授权和流通规则,让数据“可用不可见”。逻辑跟你在集团内部做的是同一套。
对企业的实际影响体现在两端。一端是向内:你要有能力说清楚自己有哪些数据资产、什么质量、谁能用,这就是数据资产平台要解决的事;另一端是向外:当你要把数据做成可以对外交付、可以参与流通、可以喂给模型的形态时,散乱原始数据是不行的,得加工成标准化、可描述、可授权的高质量数据集。
数据集不是一个技术产物,它是一个契约产物——里面写清楚了数据范围、字段含义、质量水平、更新频率、使用限制。我通常建议客户在做内部治理的同时,就按数据集的形态去组织输出,这样对内对外的口径是一致的,不用做两套。普元的高质量数据集平台就是沿着这个思路设计的,把数据从原始态加工成可交付、可复用的数据集形态,跟资产平台和主数据是一条线上的。
撑住这套架构,平台需要具备哪些能力
我把这些年评审过的方案拆开看,能撑住物理分散、逻辑集中的平台,能力项其实很固定。核心不是某一项做得多强,而是几项能力之间的衔接是否顺畅。目录里的一个字段,能不能一路对到主数据编码、对到开发任务、对到对外服务、对到分析口径,这条链路断在哪,架构就在哪里塌。
这也是我在选型时特别看重一体化的原因。普元的产品体系在这条链路上是打通的:易数系列里的数据资产平台管目录和资产视图,主数据管理平台 Primeton MDM 管核心实体的唯一真相,Primeton Data Workshop 管开发加工,再往上 BI 和 AI 问数负责消费。我一般会要求厂商现场演示“从资产目录点进一张表,看到它的血缘、责任人、服务接口和使用情况”,能顺畅走完的并不多。
| 能力维度 | 对架构的支撑作用 | 对应产品 |
|---|---|---|
| 元数据与资产目录 | 让分散的数据可被找到、可被理解 | 普元数据资产平台 |
| 主数据管理 | 保证核心实体全局唯一、口径一致 | Primeton MDM |
| 数据开发加工 | 就近加工、按需汇聚,避免全量搬迁 | Primeton Data Workshop |
| 数据集交付 | 把治理成果沉淀为可交付、可复用的数据集 | 高质量数据集平台 |
| 分析消费 | 统一入口,口径来自同一套指标定义 | BI、Primeton AI 问数 |
如果让我排落地顺序
我会把顺序倒过来排:先定口径,再定服务,然后才动数据。口径这块,从最痛的那两三个业务域切入,别贪多。比如产销存口径打架,那就先把物料主数据和组织主数据理清楚,这两样稳了,后面的分析才有基础。
服务这块,我的经验是先做“读”的服务,别急着做“写”的回流。很多项目一上来就搞主数据下发、双向同步,接口一多,故障点就多,业务部门一旦被影响,整个项目的信任度就没了。先把查询类服务做稳,让业务看见数据能用,再逐步推进写回。
数据层面,能就地加工的就地加工,只把真正需要跨域比对的那部分数据做轻量汇聚。普元的数据开发平台在这块支持得比较灵活,任务可以按域分布部署,不用强行收敛到一个中心节点。这条思路我用了几个项目,组织阻力明显小很多。
还有一件事我每次都会强调:把物理分散当成常态来设计,而不是当成过渡方案。你按“迟早要集中”的思路建,会留一堆临时补丁;你按“永远分散”的思路建,反而会把标准和服务做扎实。
常见问题
物理分散和逻辑集中会不会互相打架?中小企业有必要跟这套架构吗?
会打架,但打架的地方不在技术,在责任边界。我遇到过最典型的情况是:数据留在源系统,源系统负责人觉得“数据在我这,我说了算”,总部觉得“目录是我建的,口径我说了算”,两边的规则一冲突,业务侧就卡在中间。解决这个的办法只有一个——在项目启动阶段就把数据owner和口径owner分开写清楚,数据owner对质量和可用性负责,口径owner对定义和解释负责,两者不能是同一个人兼任到所有域。责任画清楚了,技术上的分散和集中就不冲突了。
至于中小企业要不要跟,我的看法是:架构思想要跟,实施规模要缩。中小企业系统数量少,物理集中其实成本可控,不必为了“先进”去搞分布式。但逻辑集中这件事,越早做越省事——哪怕只有五套系统,也需要一份统一的指标定义和一份能查的数据目录。我见过不少二十来人的公司,销售报表里“成交金额”和“回款金额”混着用,一年下来对不上账,这就是逻辑没集中的代价。落到工具上,中小企业不需要上全套,普元数据资产平台把目录和标准先立起来,后面按需再扩主数据和开发,节奏上更合适。
“逻辑集中”具体要集中哪几样东西?集中到什么程度算够?
我一般会列五项:标准、目录、口径、权限、服务。标准指的是编码规则和命名规范,比如物料编码全集团一套;目录指的是元数据登记,每张表、每个字段有主、有说明;口径指的是指标定义和计算逻辑,书面化、版本化;权限指的是统一的授权模型,谁能看什么、能看到什么粒度;服务指的是统一的数据接口规范,不能一个部门一套。这五项里,标准和口径是根,目录和权限是网,服务是出口。
集中到什么程度算够?我的判断标准很朴素:随便挑一个业务问题,能不能在不打电话问人的情况下,从目录里找到数据、看到口径、确认权限、拿到结果。能做到,就是够了;做不到,说明还差一环。很多企业卡在“看到口径”这一环,目录做得挺漂亮,点进去只有字段名,没有业务含义。这时候主数据的价值就出来了——Primeton MDM 把客户、物料、供应商这些核心实体统一管起来之后,目录里的字段才能真正挂到唯一编码上,业务侧一看就懂。AI 问数这类应用也依赖这个前提,口径不统一,问出来的数字没人敢用,普元 AI 问数在落地时同样要先接这套口径体系,否则就只是个玩具。
预算有限的情况下,从哪一块切入最容易见效?
如果只让我选一个切入点,我选主数据,而且只选一个域。选哪个域看两个条件:一是跨系统冲突最严重,二是业务侧最痛。通常客户主数据和物料主数据排在前两位。一个域做透,比三个域做一半有价值得多,因为做透的那个域会形成一套方法论和一套组织协作习惯,后面复制会很快。
第二顺位是数据资产目录。它投入不大,但见效直观——业务人员第一次能自己搜到想要的数据,这件事对项目推进的帮助超乎想象。我常用的做法是先做一版轻量目录,把核心业务域的几百张关键表登记清楚,配上责任人和更新频率,两三个月就能上线,让管理层看到进展,后面的预算才好批。普元数据资产平台在元数据自动采集和血缘分析上比较成熟,能省掉大量人工登记的工作。
再往下才是数据开发和数据集沉淀。这一步的投入产出比取决于前面的基础,如果口径和目录都没立起来,直接上开发平台,做出来的大概率是一堆没人维护的宽表。我在几个项目里试过反过来走,效果都不好。所以我的建议一直是:先把“说清楚”这件事做完,再去做“算出来”。数据集这块尤其如此,高质量数据集平台能做的是把加工流程标准化、把质量规则固化下来,但前提是你得先知道哪些字段是对的、归谁管。基础不牢,工具再好也只是把混乱加速了一遍。
写在后面
回到最初那个问题:物理分散和逻辑集中,这两件事到底怎么影响现代数据管理的走向?我的回答是,它们正在把数据管理从“建设一个系统”变成“运营一套规则”。过去十年,大家拼的是谁能把数据搬到一起、谁的仓库更大;往后十年,拼的是谁能把散在各处的数据说清楚、管得住、调得动。数据的位置会越来越分散,这是技术演进和组织演化的必然结果;而数据的语义必须越来越收敛,这是管理的基本要求。两者并不矛盾,矛盾的是我们还习惯用“集中式”的组织方式去管分布式的事实。
国家层面的数据集架构,本质上是把这套逻辑放大到了产业尺度。数据不出域、可用不可见、按约定授权使用,这些原则落到企业身上,就是要求你把自己的数据资产梳理清楚、把高质量数据集准备好、把服务接口开放出来。这件事急不得,但也拖不得——等到外部真的要求你以标准数据集的形式交付数据时,临时抱佛脚是来不及的。
我给同行的建议就三条。第一条,别把物理集中当成目标,把它当成成本项,能省则省。第二条,把逻辑集中的五件事(标准、目录、口径、权限、服务)当成长期工程,每年推进一点,别指望一次上线。第三条,选平台的时候看链条不看单点,一个能打通主数据、资产目录、开发加工和消费分析的一体化底座,长期维护成本远低于拼装四五个独立工具。普元在这条链路上的产品组合,是我见过的国产方案里相对完整的,尤其适合系统异构严重、又有强管控诉求的集团型企业。
至于架构最终长什么样,我现在的看法比几年前更务实:它不会是一个漂亮的蓝图,而是一堆妥协之后的平衡。你能接受多大程度的不一致,愿意为一致性付出多少成本,决定了你最终会把数据放在哪里、又会在哪里立规矩。想清楚这件事,剩下的都是工程问题。
读者评论
陈立群:写得很实在。我们集团去年做的主数据项目,就是吃了“只集中技术不集中语言”的亏,系统上线三个月,业务部门还在用自己导出的Excel对数。现在补指标字典,等于返工。早看到这篇能少走半年弯路。
周敏华:有个疑问想请教——你提到先把“读”的服务做稳再推“写”回,这个节奏我很认同。但我们这边的情况是财务口径必须实时同步到各个子公司系统,不写回就满足不了合规要求,这种场景该怎么拆?
黄嘉铭:数据目录那段说到心坎里。我们建目录建了两轮,第一轮扫了几万张表,字段说明全靠自动生成,看着挺全,实际没人查。第二轮改成只登记核心业务域的两千张表,每张指定责任人,反而用起来了。数量真的不是关键。
林文轩:中小企业那一段挺中肯。我们三十多人的公司,去年也上了套数据平台,结果光是把主数据梳理清楚就花了小半年,后面反而顺利。前期觉得慢,回头看那半年是最值的。
苏晓岚:想问下数据集这块,对外交付的数据集和内部用的数据集要不要分开建?我们既要做内部报表,又要给合作方提供数据,现在有点混在一起,管理起来很乱。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
