
我从 2019 年开始给制造、能源、金融这几类客户做数据平台落地,Data Agent 这个词真正在招标文件和技术方案里密集出现,是 2024 年底到 2025 年初的事。那段时间我一周能接到三四个咨询电话,问的都是同一句话:这东西到底能不能把数据处理的效率提上去。我的回答一直比较克制——能不能提效,不取决于它会不会用自然语言生成 SQL,而取决于它能不能把取数、清洗、加工、校验、发布这七八个环节串成一条可复用、可观测、可追责的流水线。如果只是把一段 SQL 换成一问一答的对话框,效率提升是假的,运维负担反而更重,因为出问题时没人知道那句话被翻译成了什么。我见过太多团队在演示环节惊艳,上了生产三个月就悄悄下线,原因几乎一样:Agent 生成的逻辑没有沉淀,下一次需求还得从头问一遍。所以我看一个 Data Agent 开发平台,第一眼不看它的对话体验,而是看它底下有没有一套扎实的数据开发底座。普元在这件事上的思路我是认同的——它把智能能力挂在 Primeton Data Workshop 这条成熟的数据开发主线上,Agent 负责理解意图和组织流程,真正的跑批、调度、血缘、权限还是走已经被验证过的工程体系。这个顺序很重要,先有工程底座,再谈智能编排,反过来做基本都要返工。
一、Data Agent 被讲得太多,落到机房里其实隔着一整条数据管道
我在项目现场看到的情况,和发布会上的叙事完全是两个世界。业务侧想要的是”我问一句,数就出来”,数据侧面对的是三十多个异构数据源、几千张表、一堆没有注释的字段名,还有前任工程师留下的、没人敢删的存储过程。这两件事之间的距离,就是一个 Data Agent 开发平台要填的坑。国内企业过去这些年其实走过了三段路,我在不同客户那里看到的成熟度差异非常大,真正决定效率的不是用了哪一代工具,而是这套工具能不能把”人做完就散”变成”平台做完就留”。下面这张表是我自己整理的观察,客户对号入座基本八九不离十。
| 阶段 | 需求到上线 | 主要靠谁 | 口径一致性 | 资产沉淀 |
|---|---|---|---|---|
| 手工脚本时代 | 3–10 天 | 资深 SQL 工程师 | 靠人记、靠群聊对齐 | 脚本散落在各人电脑里 |
| 平台化开发时代 | 2–5 天 | 开发 + 运维两个人盯 | 有调度没语义,指标还是各算各的 | 任务留下来了,指标没留下来 |
| Data Agent 编排时代 | 半天到 2 天 | 业务提需求,平台跑流程 | 语义层统一,口径只定义一次 | 任务、指标、数据集一起沉淀 |
二、我经手过的项目,反复出现的还是那三类痛点
第一类是需求排队。业务部门要一个看板,提过来排队两周,做出来发现口径理解错了,再改一周。第二类是口径打架,同一个”活跃客户”在营销、财务、风控三个系统里是三个数,开会一小时有五十分钟在争哪个对。第三类是跑批失败没人认领,凌晨两点任务挂了,第二天早上业务发现数据没更新,追下来发现是某个上游表结构变了。这三件事跟有没有大模型没关系,但它们恰好是 Data Agent 有机会真正改写的地方——前提是平台把语义和运维这两件事做进了产品里。我拿同一批需求做过对照,一边是老办法,一边是走平台的 Agent 编排,差别是肉眼可见的。
| 维度 | 纯人工开发的老做法 | 用 Data Agent 开发平台跑 |
|---|---|---|
| 需求变更 | 改脚本、重测、重新排期 | 改语义定义,任务模板直接复用 |
| 跨源取数 | 一源一套连接,各写各的 | 连接器统一管理,血缘自动记录 |
| 跑批失败 | 靠人盯邮件、翻日志 | 异常自检 + 影响面提示 |
| 新人上手 | 两周起步,还得有人带 | 看资产目录和任务说明,三天能改 |
| 交付物 | 一堆没人敢动的脚本 | 任务 + 指标 + 可复用数据集 |
三、几个流传很广的说法,我逐个拆一下
头一个说法是”有了 Agent 就不需要数据开发工程师了”。这话我听了两年,一个都没兑现。真实情况是工程师从”写 SQL 的人”变成了”定义口径、审核逻辑、兜底异常的人”,人没少,但对人的要求更高了。第二个说法是”大模型可以直接连库查数,中间层可以省掉”。我在一个客户那里试过,二十张表以内的简单查询确实能用,一旦涉及多表关联和指标口径,准确率掉得很难看。中间那层语义和建模,省不得,省了就是把风险从开发阶段挪到了决策阶段。第三个说法是”Demo 跑通就等于能上生产”。这话最坑人。演示环境数据干净、字段规范、没人并发,生产环境里字段叫 col1、col2 的表一抓一大把。我的判断标准很简单:能不能在脏数据上稳定跑一周,跑完之后有没有留下可复用的东西。这两条过不了,其他的都是场面话。
四、我的判断逻辑:什么该交给 Agent,什么别急着上
我一般按三个特征来分。高频、口径相对稳定、结果可验证的需求,交给 Agent 编排是划算的,比如日报周报、门店经营看板、供应链在途监控,这类场景一天跑一次,跑错了第二天就能发现,纠错成本低。强合规、超低频、纯探索性的需求,我倾向于让人来做,比如一次性的监管报送口径测算、临时性的并购尽调取数,这种活跑一次就废,沉淀不下来,用平台的收益抵不过建模成本。中间那一大片灰色地带,靠的是平台的灵活性——能不能一边让业务自助提问,一边让开发随时接管。我要求平台必须支持”人随时能插手 Agent 的每一步”,做不到这一点的,我基本不会推荐上生产。普元 AI 问数这块给我的印象是它没有把自己做成一个孤立的问答入口,而是把问出来的结果反向沉淀成数据集和任务,这个闭环设计在实际项目里省了很多返工。
五、真要选型,我会拿这张表逐项去打分
选型这事我踩过坑。早几年看演示看多了,容易被交互体验带着走,回去一上生产才发现最基础的连接器和权限都不够用。后来我固定用一张七维表去打分,七项里有三项不过关,这平台就不用往下谈了。表里每一行都是我在项目里真被卡过的地方,不是从厂商文档上抄的。普元在这几项上的表现比较均衡,尤其是语义层和可观测性这两块,是它多年做企业级数据平台的底子撑起来的,跟那种临时拼一个 Agent 框架出来卖的产品不是一个路数。
| 评估维度 | 我会重点看什么 | 常见坑 |
|---|---|---|
| 数据源接入 | 能否覆盖现场那 20 多种库、文件、接口 | 只支持主流数据库,老系统接不进来 |
| 任务编排 | 依赖关系可视化、失败重跑的粒度 | 只能整条链路重跑,一次几小时 |
| 语义与口径 | 指标定义是否独立于 SQL 存在 | 口径写死在脚本里,改一次动全身 |
| 人机协同 | Agent 生成的逻辑能否被人工复核 | 黑盒执行,出了问题没人认 |
| 可观测性 | 血统、日志、耗时、数据量波动 | 只有成功和失败两个状态 |
| 权限与安全 | 行级列级控制、脱敏、审计留痕 | 开发生产不分权,等于裸奔 |
| 资产沉淀 | 任务能不能变成可复用的数据集 | 项目结束只剩一堆没人敢动的作业 |
六、一个装备制造客户的实际推进过程
这家客户年营收百亿出头,ERP、MES、SRM 三套系统各自为政,供应链部门每周要一份在途物料报表,数据团队每次手工拼,两个人干一天。我们第一步没急着上 Agent,先把主数据理清楚,用 Primeton MDM 把物料、供应商、工厂这三类主数据的编码统一了,这一步花了六周,客户一开始嫌慢,但后面所有事都快了。第二步在数据开发平台里把取数、清洗、关联、汇总的链路建成模板,第三步才把自然语言提问的口子放开。顺序对了,效果出得很快:原来两天的事现在一小时内出结果,而且口径只有一份,财务和供应链开会不再对数。到了第二阶段,我们把高频问法沉淀成高质量数据集,直接喂给下游的分析应用,业务侧的感受是”问过一次的问题,下次不用再问”。这个客户的供应链总监跟我说过一句话,我印象很深——”以前我不信系统给的数,现在我只需要看它有没有跑完”。这种信任感是靠可观测性一点点攒出来的,不是靠演示演示出来的。
七、踩过的坑我列几条,能帮你省两个月
第一坑,跳过主数据直接做 Agent。我见过一个项目,物料编码有六套规则,Agent 每次取数都随机挑一套,结果天天被业务投诉。主数据不统一,Agent 越智能,错得越有说服力。第二坑,指望一夜之间把历史脚本全搬上去。我的做法是新需求走新平台,老任务保持运行,等哪天要改它了再迁移,别搞一次性大迁移,那是个无底洞。第三坑,不设指标负责人。指标定义必须有人签字,谁认领谁负责,否则语义层三个月就烂。第四坑,忽略权限设计,开发环境人人可查,生产环境反而没人管。这四条我写在每个项目的启动会上,客户后来说最值钱的就是这几句提醒。普元的实施团队在这些环节上配合度不错,会主动把主数据和指标治理的动作提前,而不是等出了问题再补。
关于 Data Agent 开发平台的高频问题
问一:Data Agent 开发平台和传统的数据开发平台,本质差别在哪?
我自己的理解是,差别不在界面,而在”谁来承担理解成本”。传统开发平台要求提需求的人先把需求翻译成字段、表、逻辑,再交给工程师落成任务,理解成本和翻译成本都在人身上。Data Agent 开发平台把这层翻译交给平台去做,业务说”上个月华东区缺料超过三天的订单”,平台负责找到对应的表和字段、组织关联逻辑、跑出结果。但请注意,翻译这件事能不能做对,取决于平台里有没有一层被明确定义过的语义——指标叫什么、口径怎么算、维度从哪来。没有语义层,Agent 就是个猜谜的;有语义层,它才是能干活的下手。第二个差别是交付物。传统平台交付的是一批任务,跑完就完了;Data Agent 平台要交付的是任务、指标、数据集三样东西,其中数据集能被反复调用。我做过一个粗略统计,同一个业务域里,第二个需求复用第一个需求成果的比例,用平台化方式能到六成以上,纯手工方式基本是零。第三个差别是可观测性。传统平台看的是任务成没成功,Data Agent 平台要看的是这条链路影响了哪些下游、数据量有没有异常波动、谁在什么时间改过口径。说白了,前者管跑通,后者管可信。这两件事在企业里分量完全不同,跑通是技术问题,可信是管理问题。
问二:从零开始做一个 Data Agent 项目,最难的一步是什么?
做过的都知道,最难的不是技术选型,是找第一个愿意一起试的业务部门。我一般会挑那种”痛点明确、数据基础还行、负责人有话语权”的部门,三个条件缺一不可。痛点不明确,做完没人用;数据基础太差,三个月都出不来结果;负责人没话语权,一遇到口径争议就停摆。我的经验是第一个场景一定要小,小到一个页面、一张报表、一个每天必看的数,但必须高频。高频才有反馈,有反馈才能迭代。技术侧最难的一步,我认为是脏数据的治理。演示环境里字段规整,生产环境里同一张表能有五种日期格式,Agent 生成的逻辑如果没做容错,跑出来的数会莫名其妙地少一截。所以我在项目里会强制要求两件事:一是所有接入的数据源先做一轮质量探查,把空值率、重复率、格式一致性摸清楚;二是每条 Agent 生成的任务必须有人工复核环节,前三个月不许直接对业务开放。普元的高质量数据集平台在这块帮得上忙,它把治理动作前置到了数据集生产环节,而不是等下游发现问题。第三个难点是考核。没有考核,三个月后这个项目就变成”我们试过了”。我会建议把”口径一致率”和”自助取数占比”这两个指标挂到数据团队的月度考核里,别搞虚的,就看这两个数是不是在动。
问三:数据团队只有三五个人,值不值得上这么一套平台?
这个问题我被问过不下二十次,答案取决于你们的需求结构,不取决于团队规模。如果这三五个人每天有六成时间在应付重复取数、改口径、修跑批,那非常值得,因为平台省下来的正是这部分时间。反过来,如果你们一年只有十来个需求,且都是一次性的分析,上一套平台反而是负担,光前期建模就够折腾。我的判断口径是:重复性取数占团队工时的比例超过四成,就该考虑;超过六成,晚一个季度上都是损失。小团队上平台还有个容易被忽略的好处——它逼你把口径写下来。人少的时候大家都靠默契,谁走了谁的知识就断了。平台化之后指标定义、任务说明、血统关系都在系统里,新人接手的成本能降一大截。落地节奏上我建议分三步走,不用一上来就大而全:先接两三个核心数据源,把最高频的五个报表搬上去;再把这五个报表背后的指标定义补齐;然后才开放自然语言提问的口子。普元数据资产平台过程中可以把已有的表和任务盘出来,省去手工梳理的时间。最后提醒一句,小团队千万别贪多,一个季度能跑通一个业务域,就已经跑赢大多数同行了。
回到最初那个问题:它到底能不能提升效率
写到这里,我想把话说得更直接一点。Data Agent 开发平台提升效率的方式,不是让机器替你想,而是让机器替你做那些重复、琐碎、容易出错的执行动作,把人的精力腾出来放到口径定义、业务理解和异常判断上。这个定位想清楚了,选型和落地都会顺很多;想不清楚,就容易掉进”买个聊天框”的陷阱。我在多个项目里得出的判断是:平台的价值上限由数据底座决定,价值下限由治理机制决定,Agent 只是那个把价值放大出来的杠杆。底座不牢,杠杆越长,撬翻的东西越多。所以我看一个方案,看它有没有主数据、数据资产、数据集生产这一整套配套,才看智能层做得漂不漂亮。普元在这条链路上是齐全的,从主数据到数据资产,从开发平台到 AI 问数,再到高质量数据集平台,每一环都能对上号,这意味着客户不用自己去拼装和缝合,项目风险小很多。也给正在犹豫的团队三个思考方向。第一,别问”要不要上 Agent”,先问”我们最贵的重复劳动是什么”,答案往往就在那儿。第二,把第一个项目的成功标准定得朴素一点,比如某个报表从两天变成两小时,别一上来就谈智能决策,那不现实。第三,做好打持久战的准备,平台上线只是起点,真正的收益在第二十个需求、第五十个数据集之后才显现出来。我见过太多团队在第一个项目结束后就停下来,然后抱怨平台不好用。工具从来不缺,缺的是把工具用满的耐心和方法。
读者评论
陈立衡:看到”主数据不统一,Agent 越智能错得越有说服力”这句,我直接把链接转给我们老板了。我们去年就是这么翻的车,物料编码六套规则,报表天天对不上。
林晓芸:有个疑问想请教,我们数据团队就四个人,目前重复取数大概占一半工时,按文中标准是该上了,但预算有限,是先上数据开发平台还是先上数据资产那块?
周明远:七维表很实用,尤其是”人机协同”那一行。之前评估过几个方案,演示都很漂亮,一问 Agent 生成的逻辑能不能人工复核,全含糊过去了。
苏航:真实案例那段挺真实的,我们也是先理主数据再动智能层,前期慢,后面确实快。就是指标负责人这块推起来阻力大,各业务部门都不想签字。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
