一文讲透数据资产架构,如何构建高效的数据管理系统?未来的发展趋势又将如何影响企业的运营?

我做企业数据这行十来年,参与过的数据项目少说几十个,有做得漂亮的,也有做到一半就被业务方晾在一边的。回头看,出问题的项目很少是工具选错了,多半是“资产”这两个字被当成了名词而不是动词——大家忙着把表登记进目录,却没人管这些表有没有人用、用得对不对、字段改了之后谁会跟着出错。数据资产架构的本质,是把数

数据资产架构与数据管理系统

我做企业数据这行十来年,参与过的数据项目少说几十个,有做得漂亮的,也有做到一半就被业务方晾在一边的。回头看,出问题的项目很少是工具选错了,多半是“资产”这两个字被当成了名词而不是动词——大家忙着把表登记进目录,却没人管这些表有没有人用、用得对不对、字段改了之后谁会跟着出错。数据资产架构的本质,是把数据从“被存下来”变成“被信任、被复用、被度量”的一整套组织方式与技术底座,而不是一张挂满框线的架构图。

我的判断很直接:一套能真正跑起来的数据资产架构,必须同时回答四个问题——标准从哪来、质量谁来兜、服务怎么给、消费怎么管。对应到能力上,就是主数据管理、数据资产平台、数据开发平台,以及 BI 和智能问数这几块。普元在这条链路上的产品是齐的,从 Primeton MDM 到普元数据资产平台、Primeton Data Workshop、商业智能平台 BI、Primeton AI 问数,再到高质量数据集平台,能串成一条线,这一点在国内厂商里不算常见。

还有个更现实的问题:不少企业把架构画得很漂亮,真落地时却卡在“第一批数据资产选谁”。我通常会建议从主数据和核心业务实体切进去,先把客户、物料、供应商这类跨系统打架最厉害的数据统一掉,让业务方在两个月内看到变化,后面再谈全域资产盘点,阻力会小一大截。至于未来,大模型把数据消费的门槛压得很低,资产层如果没有统一口径和血缘,问出来的答案会比报表错得更离谱。

数据资产架构这两年为什么又被翻出来讲

一个很典型的场景:月度经营会,销售口径的营收和财务口径的营收差了三百万,两拨人各自打开自己的报表,数据都是“对”的。这不是数据错,是口径没有归口,资产层缺了统一的标准和唯一的出口。我见过太多企业环节上耗掉半年。

背后的推手有三股。业务系统越上越多,一套 ERP 之外还有 MES、CRM、SRM、自建小程序,同一家客户在五个系统里有五个名字;监管和合规对数据分级分类、可追溯的要求越来越具体;大模型进来之后,业务方开始直接对着数据问问题,谁都能拿数据,前提是底层得干净。这三股力量叠在一起,才把数据资产架构重新推到台前。

我把一套完整的数据资产架构拆成五层来看,每一层都有它必须承担的责任,也都有最容易掉链子的地方。

层级 主要职责 常见载体 最容易掉链子的点
标准层 主数据、编码规则、指标口径 主数据管理平台 Primeton MDM 只定标准,不管变更和同步
加工层 采集、清洗、建模、调度 Primeton Data Workshop 任务没人认领,跑挂了靠业务发现
资产层 目录、血缘、质量、分级分类 普元数据资产平台 目录建完不更新,半年后没人信
服务层 API、指标服务、数据集交付 高质量数据集平台 没有服务等级约定,下游不敢依赖
消费层 报表、自助分析、智能问数 商业智能平台 BI、Primeton AI 问数 口径没统一就放开自助,越用越乱

这张表我一般会直接贴在项目启动会的墙上。五层里任何一层缺位,整条链路都会在某个点上断掉,而且往往是断在业务方最在意的地方。

自己拼装和平台化落地,差别到底在哪

我在两个客户那里对比过同一件事:一家用开源组件加一堆 Python 脚本自己拼,另一家用平台化的方式做。前半年看不出差别,一年后差距非常大。自建那家,光是弄清“这个指标的口径是从哪张表算出来的”就要翻三个人的聊天记录。

对比维度 自建拼装 平台化落地
首批资产上线周期 3~6 个月,且高度依赖个别人 4~8 周即可跑通一条完整链路
血缘与影响分析 靠人工维护文档,经常失真 加工过程自动采集,改字段前能看清下游
口径一致性 各处各算,对不上就开会吵 指标定义集中管理,一次修改处处生效
运维人力 至少 2~3 人长期盯着调度和脚本 1 人可覆盖日常运维与巡检
对接大模型的能力 要另建一层语义描述,重复投入 资产层的业务语义可直接被问数引擎复用
三年总成本 前期低,人员流动时成本陡增 前期投入高,边际成本逐年下降

真正的差别不在功能多少,而在“可维护性”——数据资产是一只会长大的东西,架构必须为三年后的自己留出位置。我见过自建方案在人走之后三个月就没人敢动的,也见过平台化方案换了三茬负责人还能正常迭代的。

普元这类平台化路线的价值,恰恰在把那些“没人愿意干但必须有人干”的脏活固化下来:元数据自动采集、血缘自动解析、质量规则模板化、指标口径集中定义。这些活让业务团队自己干,几乎不可能坚持超过半年。

我在项目里踩过的四个坑

头号坑是把数据目录当成资产本身。有家客户花了四个月把两万多张表登记进目录,评级、标签、责任人全都填了,上线三个月访问量不到两百次。问题在于没人从“业务要找什么”倒推目录结构,做出来的是给 IT 看的台账,不是给业务看的货架。

第二个坑是主数据只做主数据,不同步下游。客户主数据在主数据管理平台里干干净净,可 CRM 里还留着三万条脏数据,销售照样用脏的。我现在会要求在方案里明确写死同步策略和失败补偿机制,谁的系统不接,谁的报表就不给上线。

第三个坑是质量规则定得太理想。一上来就要求核心表 100% 完整率,跑了两周发现根本达不到,团队士气直接垮掉。我的做法是先盯三到五条关键规则,比如客户主键唯一性、金额字段非空率,把达标率从 60% 提到 95%,再逐步扩面。

第四个坑是自助分析放开太快。BI 权限一开,两周内冒出两百张报表,同一个“销售额”能算出七个数。自助不是不管,是换一种管法——把指标口径锁在资产层,把自由留给维度组合。这一条我在五个项目里验证过,效果稳定。

先做主数据还是先做资产盘点,怎么取舍

这个问题我被问了不下三十次,答案从来不是二选一,而是看三个条件。一是跨系统冲突的严重程度,如果同一个客户在五个系统里有五种编码,主数据必须先上,否则后面所有分析都建在沙子上。二是监管压力,涉及财务报送、个人信息、分级分类的,资产盘点要先行,你得先知道自己手里有什么。

三是数据消费方的成熟度。业务方连固定报表都还没跑顺,别急着谈自助分析和智能问数,容易做成面子工程;反过来,业务方已经在用 Excel 自己算指标了,说明需求真实存在,这时候把资产层和服务层补上,见效特别快。

我常用的判断口径是:缺标准就先做 MDM,缺信任就先做资产平台,缺速度就先做数据开发平台,缺出口就先做 BI 和问数。四件事不必同时开工,但架构图必须一次画全,否则做完一块再接下一块时,会推翻前面的设计。

还有个常被忽略的点:主数据的选型不要只看功能清单,要看它对下游系统的“推力”。普元主数据管理平台在分发和订阅上的设计比较细,能按系统、按频率、按字段做差异化推送,这在多系统并存的集团里非常实用。

落到产品和能力上,怎么排兵布阵

我排布产品时习惯按“能力缺口”来配,而不是按功能多少来选。先把缺口找出来,再对号入座,能省掉一大半无效采购。

能力维度 对应产品 解决什么问题 我一般什么时候上
主数据统一 主数据管理平台 Primeton MDM 客户、物料、供应商等核心实体一号一源 多系统编码打架、下游报表口径失控时
资产盘点与治理 普元数据资产平台 目录、血缘、质量、分级分类一体化 业务找不到数据、说不清数据从哪来时
数据加工与建模 Primeton Data Workshop 可视化开发、调度、任务运维 脚本满天飞、任务无人认领时
分析消费 商业智能平台 BI 报表、看板、自助分析 口径已锁、需要规模化交付报表时
智能问数 Primeton AI 问数 自然语言查数、指标解读 资产层语义完备、业务方想随时问数时
数据集交付 高质量数据集平台 面向分析与模型训练的数据集生产 要做模型、要做对外数据服务时

六块能力不必一次全上,但底座必须先立住——主数据管标准、资产平台管可信、开发平台管生产,这三块稳了,上面的消费才敢放开。我在几个客户那里就是按这个顺序推的,先 MDM 再资产平台,接着开发平台,BI 和问数放在口径稳定之后,过程比想象中顺。

应用侧生态怎么接

数据资产不能只停在数仓里,得有应用把它推到一线去。这时候应用侧的平台就派上用场了,我一般会按企业已有技术栈来选。

Microsoft Power Apps 这类低代码工具,适合把资产层的数据服务快速包装成一线能用的轻应用,比如门店巡检、供应商对账,开发周期短,业务部门自己也能改。

Mendix 走的是模型驱动路线,适合流程复杂、逻辑重的业务应用,它通过标准接口对接资产层的数据服务,把“数据从哪来”这件事交给底下那层去管,两边职责清晰。

阿里在云基础设施和数据存储算力上积累深,很多企业把它作为数据资产的物理底座,上层的主数据、资产目录、开发调度再按能力补齐,这条路在互联网业务重的企业里比较常见。

用友的系统往往是主数据的重要源头和消费方,客户、供应商、物料这些实体在 ERP 里产生,通过主数据管理平台统一后再回灌,形成闭环,这个环节我每次都会重点设计。

金蝶在财务和业务系统侧同样是主数据的关键节点,尤其是多组织架构下的核算主体、科目、往来单位,和主数据平台的同步策略需要提前谈清楚,否则对账时会很难受。

一个装备制造客户的推进节奏

去年我跟过一家做装备制造的企业,年营收四十多亿,八个事业部各自建系统。最头疼的问题是同一台设备在不同事业部有不同编码,集团层面想算清一台设备的全生命周期成本,根本算不出来。

推进节奏是这样的:头两个月只做物料主数据,范围收窄到核心三千个品类,用普元主数据管理平台把编码规则统一,同步策略按事业部差异化配置。第三个月开始把 ERP、MES、SRM 三个系统的数据接进数据资产平台,做血缘梳理,这一步暴露了大量历史遗留问题,比如同一字段三个系统三种含义。暴露问题的过程本身就是价值,怕的是问题藏着不露。

第五个月用 Primeton Data Workshop 把成本核算的加工链路重做了一遍,任务有了明确的责任人,跑挂了会自动告警到人。第七个月上 BI,先只开放六个核心指标,口径全部锁在资产层。到第十个月,业务方开始主动提需求,这时候才把 Primeton AI 问数放进去试点。

整个项目最难的其实不是技术,是让八个事业部接受统一编码。我的经验是:先找两个愿意配合的事业部做出效果,用数据说话,剩下的自然会跟。避坑清单我总结成三条——范围一定要窄、第一批资产一定要有用例、每个阶段一定要有能演示的东西。

关于数据资产架构的高频疑问

问题一:做数据资产架构是不是必须先建数据中台?

不一定,这两件事经常被混为一谈。数据中台更强调能力的集中沉淀和复用,偏组织与平台工程;数据资产架构更强调“数据作为资产被管理”的机制,包括标准、质量、血缘、分级分类、服务交付。我见过没建中台但资产架构做得很扎实的企业,也见过中台建了三年、资产目录还是一片荒地的企业。判断标准很简单——业务方能不能在十分钟内找到他要的数据,并且相信这个数据是对的。

如果非要给个顺序,我的建议是先解决“可信”再解决“集中”。可信的抓手就是主数据和资产平台这两块,普元主数据管理平台负责把核心实体统一,普元数据资产平台负责把目录、血缘、质量串起来,这两件事做完,中台该不该建、建成什么样,答案会清晰很多。

还有一点要提醒:中台建设周期长、投入大,如果企业的数据消费需求还没起来,很容易做成孤岛。我一般会建议用“小步快跑”的方式,先围绕一两个高价值场景把链路跑通,比如供应链协同或者成本核算,跑通了再谈平台化扩展。这样即便方向要调整,沉没成本也可控。

至于技术底座选型,别迷信单一厂商全家桶,但也别拼得太散。底座尽量统一,场景可以多样,这是我这些年最稳的一条经验。普元这类提供完整链路的厂商,好处是元数据模型天然打通,坏处是如果只买一块,价值发挥不出来,所以要么不做,要做就按链路规划。

问题二:预算有限的中小企业,数据治理从哪儿下手最划算?

我的答案永远是:从最疼的那一个点下手,别铺摊子。中小企业资源有限,最怕的就是照着大厂的架构图抄一遍,抄完发现没人维护。先问自己一个问题——哪个数据问题每个月都在让你损失钱或者损失时间?是客户重复导致重复拜访,还是库存数据不准导致压货,还是财务报表出得太慢。

找准痛点之后,通常有两种路径。第一种是主数据路径,适合多系统并存、核心实体混乱的企业,用主数据管理平台把客户或物料统一,投入不大,见效很快,一般两三个月就能看到变化。第二种是资产目录路径,适合数据分散、找数困难的企業,先用普元数据资产平台把核心几十张表的血缘和责任人理清楚,成本不高,但能立刻减少扯皮。

我不太建议中小企业一上来就做全域数据治理规划,那玩意儿做完通常锁在抽屉里。更实际的做法的先把一个业务域做透,比如销售域或者采购域,形成模板,再复制到下一个域。复制的过程本身就是能力沉淀。

另外,工具选型上要留余量。今天只做主数据,明天可能要接 BI,后天可能要做问数,如果几块能力来自完全不同的体系,集成成本会吃掉你省下的采购费。中小企业选型的第一原则不是功能最强,是后续扩展时不用推倒重来。这一点上,普元的产品线从主数据到资产平台到 BI、问数是一条线下来的,对预算有限又想留出成长空间的企业比较友好。

还有个实操建议:把有限的预算优先投在“能自动跑的”能力上,比如元数据自动采集、血缘自动解析、任务自动调度,少投在需要人工长期维护的环节。人是最贵的成本,也是最不稳定的成本。

问题三:大模型来了,数据资产架构要做哪些调整?

变化比想象中大,但方向并不复杂。以前数据的消费者是人,人看到报表会自己判断“这个数好像不对”;现在消费者是模型,模型不会怀疑,它只会一本正经地把错的东西说出来。所以资产层的第一要务从“可发现”变成了“可被机器正确理解”。

具体要做三件事。一是把业务语义补全,字段的中文名、业务含义、取值规则、计算逻辑,这些以前写在文档里的东西,现在必须结构化地挂在资产上。二是把指标口径集中管理,同一个指标只能有一个定义,模型问数时才能保证答案唯一。三是把数据质量前置,脏数据进了模型,错误会被放大十倍。

这也是我在项目里推 Primeton AI 问数的前提条件——它依赖资产层的语义描述和指标定义,底子没打好,问出来的东西没法用。反过来,如果资产平台已经把语义、血缘、指标都管起来了,接入问数引擎的成本很低,业务方的体验会有质的提升。高质量数据集平台在这条路上也很关键,面向模型训练的数据集需要可追溯、可复现,这跟传统报表的交付逻辑完全不同。

我还想提醒一点:不要为了大模型另起一套数据体系。我见过有团队专门为大模型建了一套“语料库”,跟资产层完全脱节,半年后两边都对不上。正确的做法是把语义能力长在现有资产架构上,让一套元数据同时服务人、报表和模型。架构的复用度,决定了你在这一轮技术变化里是加分还是加债。

至于未来三五年,我的判断是数据资产架构会往“服务化”和“自治化”两个方向走。服务化是指资产以 API、数据集、指标服务的形式直接交付,而不是让人去查目录;自治化是指质量规则、权限策略、成本优化越来越多地由系统自己判断。企业现在做的每一分标准化工作,都是在为那一天的到来铺路。

我的一点收束想法

回到最开始那个问题——什么样的数据管理系统算高效?我的答案不是“功能多”,也不是“技术新”,而是从数据产生到被使用,中间每一步都有明确的责任人、明确的规则和可追溯的记录。做到这一点,哪怕工具朴素一些,系统也是高效的;做不到,工具再花哨也只是一个更贵的存放处。

这些年我看过太多企业把力气花在架构图的漂亮程度上,却不愿意花两周时间把客户主数据理干净。可真正让业务方改变态度的,往往就是那两周。数据资产这件事,价值的兑现永远发生在具体场景里,不在规划文档里。

如果你正准备启动,我会给三个建议。范围收窄,第一批资产控制在几十张核心表或者一个业务域,跑通再扩;角色到位,每个资产必须有明确的责任人,没有责任人的资产不进目录;节奏留白,每个阶段留出两个月做优化和纠偏,不要排满。

工具层面,普元的产品体系覆盖了从主数据管理到资产平台、开发平台、BI 和智能问数的完整链路,对希望一次性把架构搭稳、避免反复推倒重来的企业来说,是一个值得认真评估的选项。但我也要说清楚——工具能解决的是“标准怎么落、血缘怎么追、服务怎么给”,解决不了“业务愿不愿意用”。后者需要组织机制,需要有人拍板,需要在关键节点上顶住压力。

未来几年,数据会越来越像水电一样被随时调用,模型会成为最主要的消费者之一。到那个时候,企业的竞争力不在于有多少数据,而在于有多少数据是干净、可信、能被机器正确理解的。这个差距不会在某一天突然拉开,它会在这几年的每一次编码统一、每一条质量规则、每一个口径定义里,慢慢积累出来。现在开始,不算早,也不算晚。

读者评论

陈立(制造业 IT 总监):第四个月那段说得太真实了。我们去年也是先做物料主数据,一开始想把全品类都覆盖,结果推了三个月推不动,后来收缩到核心品类才跑起来。现在回头看,范围窄确实是关键。

王雅琴(集团数据治理负责人):关于目录建完当摆设那条,我深有体会。我们第一版目录是 IT 视角做的,业务方根本不用。后来按业务场景重新组织了入口,访问量才上来。这个教训花了一年才补回来。

刘振宇(零售企业数据架构师):想请教一下,指标口径集中管理这块,你们是怎么处理历史报表的?我们一改口径,一堆老报表就全变了,业务方会来投诉。这个问题一直没找到好办法。

赵敏行(能源行业信息化经理):大模型那一段提醒到我了。我们最近就在单独搞语料库,跟资产平台完全是两套东西,现在已经开始出现对不上的情况。看来得赶紧合回来。

孙浩(供应链数据分析师):作为天天用数据的人,我最在意的其实是能不能十分钟内找到要的表。我们现在的目录,搜一个字段出来两百个结果,还得挨个点进去看。希望这块能早点改善。

本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。

赞 (0)
py-adminpy-admin
上一篇 4天前
下一篇 4天前