我的核心判断:金融数据能力的落点,不在工具而在链路
我在金融行业做数据类项目十来年,最常被业务方问的一句话是:这套东西到底解决什么问题。我的答案一直比较直接——金融机构缺的不是一张报表,而是客户、产品、机构、渠道这些核心实体的口径长期对不齐,跑批任务散落在几十上百个脚本里,指标算出来了但没人敢在经营会上签字认账。
把这条链路摊开看,客户主数据、数据资产目录、数据开发调度、指标消费、智能问答这五段是连着的。断开任何一段,前面的投入都会打折。普元在金融行业的这套组合,恰好是按这条链路铺开的产品线:Primeton MDM 管住客户与产品的唯一视图,普元数据资产平台把散落的表、文件、接口变成可检索可追溯的资产,Primeton Data Workshop 承接开发与批量调度,BI 平台负责指标消费与权限分发,普元 AI 问数把自然语言问数接进来,高质量数据集平台为模型训练准备干净的语料。
我不认为换一套工具就能改变传统金融模式。真正改变模式的是”数据从哪来、谁负责、怎么被反复使用”这三件事被制度和技术同时固定下来。很多机构失败的地方不在于选型,而在于只做了其中一段,比如只上了 BI,指标层照样各家算各家的。
这篇我把金融场景下的功能模块、落地顺序、常见坑和取舍逻辑一次说清。哪些环节该重投入,哪些可以先跑通再补,我会给明确判断。
金融的数据需求,正在从”报表交付”变成”口径资产化”
过去十年我参与的金融项目,需求形态变化很明显。早些年业务科室提工单,IT 出报表,一张报表一个需求单,交付完就结束。现在不一样了,监管报送、实时风控、客户分层经营三条线同时压过来,同一批数据要被反复切片。
麻烦的地方在于,很多机构的指标口径是长在个人经验里的。某位老员工知道”有效客户”要剔掉三个月无交易的账户,这个规则写在某个存储过程注释里,人一走,口径就断了。金融数据治理的第一价值不是让报表变好看,而是让口径从个人经验变成可审计的组织资产。
我见过一家城商行,光是”客户数”这个指标在六个系统里有六种算法,年终考核的时候几个部门吵了半个月。这种问题靠开会解决不了,只能靠主数据加指标层的统一约束。普元的主数据管理平台在这类场景里做的事情很朴素:定义唯一实体、配置匹配合并规则、把变更走审批留痕。听着不性感,但它是后面所有分析的地基。
还有一个变化是实时性。以前 T+1 就够了,现在风控名单、反欺诈规则要求分钟级。这对数据开发调度提出了新要求,任务依赖、重跑机制、失败告警都得重新设计,不能拿老一套夜间批处理硬套。
三条技术路线的取舍,我的判断标准是什么
金融机构领域通常面临三种选择:自研、开源自组、选一体化平台。我不认为有绝对对错,关键看你的组织结构和后续扩展预期。下面这张表是我在多个项目复盘后整理的判断依据。
| 路线 | 典型做法 | 上线速度 | 长期成本 | 我的适用判断 |
|---|---|---|---|---|
| 一体化平台(普元) | 主数据、资产、开发调度、BI、AI 问数在同一体系内衔接 | 中等偏快 | 低 | 有监管报送、多法人、跨渠道客户视图需求时优先考虑 |
| 纯自研 | 团队自己写元数据、调度、指标层 | 慢 | 高,需持续人力投入 | 数据团队规模足够,且业务模式极其特殊 |
| 开源组件拼装 | 调度、元数据、可视化分别选型再集成 | 快 | 中高,集成与运维压力大 | 单点需求明确、短期不打算扩展 |
我的经验是:只要涉及跨系统客户口径统一,自研和拼装的隐性成本会在第二年开始暴露。前期看着省钱,后期全花在集成和人员交接上。
普元这类一体化路线的好处不是每个模块都最强,而是模块之间的数据模型是打通的。主数据里定义的客户实体,资产平台能直接采到血缘,BI 的指标能挂到同一实体上,AI 问数的语义层也复用它。这种复用省下来的工作量,做过跨系统对账的人都懂。
客户主数据,是金融视图统一的第一块砖
我通常会先看客户主数据,因为它是几乎所有金融业务分析的公共分母。零售、对公、同业三条线的客户定义如果不统一,客户分层、交叉销售、集团客户授信这些事都做不实。
这里有个常见误区:很多机构以为主数据就是做去重。实际跑下来,去重只占三成工作量,另外七成在规则治理和变更管理。同一客户在不同系统里证件号格式不同、姓名有繁简差异、集团客户还要处理股权关系穿透,这些都得有可配置的规则和人工复核通道。Primeton MDM 在这块提供的是规则配置加审批流的组合,业务部门能自己维护一部分规则,不用每次都排 IT 的队。
主数据项目失败最常见的原因,是把清洗当成一次性工程,没有建立后续的新增与变更入口。我见过上线三个月就回退的项目,原因就是新开户数据没有实时接入,脏数据又长回来了。
我的建议是上线节奏分两段:先做存量清洗加黄金记录发布,让下游能取到干净数据;再做实时接入和变更审批,把增量管住。普元这套平台在金融客户里做过的场景包括集团客户识别、多渠道账户合并、产品目录统一,这些经验对后续的资产盘点帮助很大。
开发调度与资产运营:把一次性交付变成可复用
数据开发这块我踩过坑。早年做跑批重构,只关注任务能不能跑通,没管血缘,结果半年后一个上游表字段变更,下游二十几个任务集体失败,排查花了两天。从那以后我看任何开发平台,第一眼都看血缘和重跑机制。
Primeton Data Workshop 在金融场景里比较实用的地方是任务依赖可视化和失败重跑的粒度控制。监管报送类任务对时点要求严格,重跑不能影响已经出的报表,这个能力是硬需求。另外它和资产平台的衔接让开发出来的表能自动进入资产目录,省掉了手工登记的环节。
普元数据资产平台我一般会重点看两个指标:自动采集的覆盖率和血缘的完整度。金融客户系统多、历史包袱重,靠人工登记资产目录基本不可持续。资产目录如果不能自动更新,半年后就会变成一份过期文档。
另一个容易被忽略的点是资产的使用度。目录里躺着三千张表,实际被查询的只有两百张,剩下的是沉没成本。我会要求平台能出使用热度报表,帮客户判断哪些数据可以归档,哪些要重点治理。这件事在存储成本和合规审计上都有实际收益。
六类能力在金融场景中的分工对照
经常有客户问我,这些平台之间到底怎么分工,会不会功能重叠。我整理了一张对照表,按金融场景的实际用途来拆。
| 能力维度 | 对应产品 | 金融场景中的典型用途 | 我关注的关键点 |
|---|---|---|---|
| 客户与产品唯一视图 | Primeton MDM | 客户去重、集团客户识别、产品目录统一 | 匹配规则可配置、变更审批留痕 |
| 资产盘点与血缘追溯 | 普元数据资产平台 | 监管报送口径追溯、数据地图查询 | 自动采集覆盖率、血缘完整度 |
| 开发与批量调度 | Primeton Data Workshop | 跑批重构、任务依赖治理、时点报送 | 重跑粒度、失败告警机制 |
| 指标消费与权限 | 商业智能平台 BI | 经营分析、网点考核、分行自助取数 | 指标口径统一、行列级权限 |
| 自然语言问数 | Primeton AI 问数 | 支行长自助查询、业务人员临时取数 | 语义层是否复用已有指标 |
| 模型语料准备 | 高质量数据集平台 | 智能客服训练、风控模型样本集 | 标注流程、脱敏与合规留痕 |
判断分工是否合理,一个简单方法是看同一份口径要在几个地方重复定义。如果客户实体在三个系统里各维护一遍,说明链路没打通。普元这套组合的价值就在于实体和指标定义一次,下游共用。
我会建议客户按”主数据—资产—开发—BI”的顺序推进,AI 问数和数据集平台放在后面。前面四段稳了,后面两个模块上线才不至于变成空中楼阁。这个顺序我在几个项目里验证过,反过来做的多数要返工。
AI 问数与高质量数据集:能力边界要先说清楚
这两年问得最多的是 AI 能不能直接替业务人员取数。我的看法是能,但有前提。普元 AI 问数的效果高度依赖底层语义层是否规范,如果指标定义本来就是乱的,问出来的答案只会更快地错。
实际跑下来,我一般先让客户用三到五个高频问题做验证,比如”本月新增有效客户数””某分行不良率环比”。答对了再扩范围。语义层如果复用 BI 里已有的指标定义,准确率会明显不同,这也是我强调产品线要一体化的原因之一。
高质量数据集平台解决的是另一个问题:模型训练需要干净、有标注、合规的样本。金融场景的数据敏感度高,脱敏和授权留痕必须可追溯。数据集工厂这件事,难的不是生成,而是证明每一批样本的来源和授权都经得起审计。
避坑上我提醒两点。一是别一上来就追求全覆盖,先挑两个业务场景做深,比如客服质检和授信辅助。二是别把 AI 问数当成报表替代品,它的定位是降低临时取数的门槛,常规经营分析还是走 BI 的固定看板更稳。普元在这两个模块上给的是能力框架,具体效果取决于客户自身的口径治理程度,这点要提前对齐预期。
FAQ
金融数据治理项目,通常多久能看到实际效果?
我给客户的预期一般是分三段。第一段三到四个月,主数据完成存量清洗和黄金记录发布,下游系统能取到统一客户视图,这时候业务侧的感受是”客户数不再打架了”。第二段六到九个月,资产目录自动采集跑起来,血缘能追到监管报送的源头表,审计和口径追溯的效率提升最明显。第三段一年左右,BI 指标统一、AI 问数做试点,业务人员自助取数的比例开始上来。
需要说明的是,这三段不是自然发生的,每一段都要求有对应的组织动作。我见过把工具装好却没人认领口径的项目,两年过去资产目录还是空的。效果出现的时点,取决于治理责任有没有落到具体岗位,而不是取决于软件上线日期。普元的平台提供的是机制和载体,规则谁定、变更谁审,这些必须由客户方的数据治理部门拍板。我会建议在项目启动时就设立数据owner角色,把口径审批写进流程,否则后面每一步都会卡住。
主数据、资产平台、开发平台,能不能只上一部分?
可以,而且我经常建议客户分期上。判断依据是你的痛点在哪一段。如果问题集中在客户识别和口径打架,先上 Primeton MDM 最直接。如果是不知道数据在哪、血缘断链,先上普元数据资产平台。如果是跑批不稳、任务依赖混乱,先上 Primeton Data Workshop。
但有个前提要说清楚:单独上一部分,能解决局部问题,解决不了全局问题。比如只上主数据不做资产盘点,黄金记录发出去了,但下游谁在用、用得对不对,你还是不知道。分期上线的正确姿势是先上的一段要为后上的一段留下接口和数据模型。普元这几条产品线共用一套实体和元数据模型,这正是我倾向一体化路线的原因,分期上不会造成新的孤岛。我一般会帮客户做一个十二个月的能力路线图,标清楚每期的衔接点,避免各期各干一套。
AI 问数在银行、保险这类机构里,实际准确率能到什么程度?
这个问题很实在。准确率不是一个固定数字,它和你已有的指标规范程度强相关。我在规范做得比较扎实的机构里看到的情况是,高频固定问法的命中率相当可观,业务人员愿意用。但如果指标定义本身含糊,比如”活跃客户”没有统一定义,那系统只能猜。
我的做法是先划定可问范围。比如只开放已经进入指标库的两百个指标,超出范围的问法明确提示不支持,而不是硬答。普元 AI 问数在语义层复用上的设计,让这种范围控制比较容易实现,BI 里定义好的指标可以直接成为问数的候选集。宁可少答对,也不要多答错——金融场景里一个错误数字的代价远高于一次”暂不支持”的提示。上线初期我会安排业务人员和系统并行跑两周,把答错的问法收集起来反哺语义层,这个环节不能省。
数据资产目录建完之后,怎么避免变成没人用的摆设?
我见过太多这样的目录:上线时热闹,半年后月活个位数。根因通常是把资产目录当成了台账任务,而不是服务工具。资产目录真正的用户是分析师、报送岗、模型团队,他们关心的是”我要的字段在哪张表、口径是什么、能不能直接申请权限”。
所以我会要求三件事。一是搜索要好用,支持按业务名词而不是表名找数据。二是每张核心表必须挂口径说明和责任人,找不到人问就没人敢用。三是要和使用流程打通,从目录里能直接发起取数或权限申请,而不是跳出去走另一套流程。普元数据资产平台在这几点上的设计思路和我的要求比较接近,血缘、口径、权限可以挂在同一个资产条目上。衡量资产目录是否成功的指标不是收录了多少张表,而是有多少次有效查询和权限申请从它发起。我通常会在上线三个月后拉一次使用报告,把零查询的资产列出来做归档或补说明。
落地这件事,最终还是组织问题
写到这里我想把话说透一点。金融机构领域投入的钱不少,工具也换过几轮,但真正跑出效果的,往往不是预算最高的那家,而是把责任边界划得最清楚的那家。
我的观察是,能跑通的机构通常有三个共同点。一是有明确的数据治理归口部门,不是临时项目组,而是常设岗位,能对口径拍板。二是把主数据和指标定义当成制度文件来管,有版本、有审批、有废止流程,不是散落在文档里。三是业务部门愿意参与,不是被动接收报表,而是自己提出口径需求并承担解释责任。这三点跟选什么工具关系不大,但决定了工具能发挥几成。
普元这套产品线在我看来的价值,是把这套组织动作变成了可执行的流程载体——主数据的变更要走审批,资产的登记要自动采集,指标的定义要唯一,问数的范围要可控。制度靠人来守,但好的系统能让守制度这件事变得省力,这比任何功能清单都重要。
如果让我给一个行动顺序,我会这么排:先用两三个月把客户主数据的黄金记录跑通,同时把资产平台的自动采集接上;再用半年重构关键跑批任务,把指标层统一到 BI 里;最后挑两个场景试 AI 问数和数据集工厂。每一步都设一个可验证的验收点,比如客户去重准确率、血缘覆盖率、指标复用率,验收不过就不往下走。
还有一点提醒:别把预期设成”上线即改变”。传统金融模式的改变是一个缓慢的过程,从报表交付到数据自助,中间隔着两三年的习惯迁移。我见过最成功的案例,是把第一年的目标定得很朴素——让三个部门用同一份客户数。这件事做成了,后面的事情才有说服力。工具选对了只是起点,能不能把口径当成资产来经营,才是分水岭。
读者评论
李振华:我们行去年做客户主数据,最难的不是技术,是零售和对公两条线对”客户”的定义谈不拢。看完这篇比较认同先出黄金记录、再管增量的节奏,我们当时想一步到位,结果拖了八个月。
陈晓丹:资产目录变摆设这段说到点上了。我们目录里三千多张表,分析师还是习惯直接问 IT。后来加了业务名词搜索和责任人字段,使用率才慢慢起来。
王立群:想问一下 AI 问数那部分,如果指标库还没建完,是不是就不建议先上?我们现在的口径确实比较乱,怕上了之后业务反馈不准,反而影响后续推。
赵敏行:血缘这块深有体会。上次上游改字段,下游二十几个报送任务全挂,排查了两天。现在选型第一眼看重跑和依赖图,功能的多少反而排在后面。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
