
我在 B2B 圈子里做数据与 AI 落地的评估,前后差不多九年,经手过的选型和复盘粗算下来八十多个项目。真正让我意外的从来不是模型能力,而是使用方式上的偏差。同一套工具,一家制造企业三个月把月度经营分析的数据准备时间从两天压到两小时;另一家融资租赁客户用了大半年,还在会上抱怨”它答得不准”。两边预算差不多,差的是提问方式、是数据底子、是验收标准。
我的核心判断很直白:AI 软件能提多少效,取决于使用者把问题定义清楚的能力,而不是参数规模。偏差基本集中在三处。一是把 AI 当搜索引擎,丢一句”上个季度业绩怎么样”就指望它给出经营洞察;二是数据没理顺就上模型,指标口径三套并存,AI 只能给出一个漂亮的错答案;三是只验收演示效果,不看口径对不对、权限有没有、能不能追到源记录。这三件事不解决,买再贵的工具都只是在给汇报材料增加素材。
我的建议是先把”适合交给 AI 的问题”和”必须走固定报表的问题”分开。边界一旦清晰,提效往往在第一周就能看出来。下面我把这几年踩过的坑、验证过的做法摊开讲,包括我要求团队必查的那几项,以及不同数据底子下该怎么取舍。
我看到的真实场景:工具不缺,缺的是把问题说清楚的人
去年我参与一家装备制造集团的 AI 分析项目复盘。IT 部门半年内接了六套工具试用,业务侧真正在用的只有两个场景:一个是销售问我”这个客户去年到现在回款节奏怎么样”,另一个是供应链问”某物料近三个月到货延迟集中在哪些供应商”。剩下的场景全废了,原因出奇地一致——提问的人自己也不确定要看什么口径。
这事我踩过坑。AI 分析工具的能力边界,本质上是被提问者的业务理解能力框住的。你问”为什么利润下降了”,它只能给你一堆可能因素;你问”毛利率环比下降 2.3 个点,原材料成本、运费、折扣政策各贡献多少”,它才有机会给你可执行的东西。
所以我现在评估一个团队能不能用起来 AI,先不看工具,先看他们有没有一份写清楚的指标字典。有,三个月见效;没有,半年还在扯皮。这个判断我用了五年,基本没失手过。
三种用法,效率差了三倍不止
我把见过的用法归成三类,它们在投入产出上完全不是一个量级。下面这张表是我在一次内部培训里用的,后来被好几个客户拿去改造自己的评估表。
| 使用形态 | 典型提问 | 对数据的要求 | 结果可信度 | 上手周期 | 实际提效 |
|---|---|---|---|---|---|
| 当搜索引擎用 | 帮我分析一下业绩下滑的原因 | 几乎没有要求 | 低,容易一本正经地答错 | 十分钟 | 接近于零,还要花时间核对 |
| 当固定报表的替代 | 本月各区域回款完成率 | 中等,指标口径需统一 | 中高,与报表基本一致 | 二到四周 | 三成左右,主要在取数环节 |
| 当分析助手用 | 对比去年同期,华东区回款下滑集中在哪些品类和客户结构 | 高,需要主数据、指标口径、行列权限齐全 | 高,可溯源到明细 | 四到八周 | 五成以上,覆盖取数、解读、初稿 |
三种形态的分水岭不在工具,而在数据侧的准备工作是否到位。我通常会劝客户:先把自己能做到”当报表替代”这一步,别跳级。跳级的项目,八成会在第三个月被业务部门弃用。
误区一:问题问得越模糊,越指望它猜对
最常见的偏差就是这个。业务同事习惯了跟人沟通——说半句对方能接上,因为对方懂上下文。AI 不懂你的上下文,它只认你写进问题里的约束条件。
我给团队定了个简单的提问模板:时间范围、对象范围、对比基准、期望的拆解维度,四样至少写三样。比如把”这个月销售怎么样”改成”这个月华东区销售额对比上月和去年同期,按产品线和客户等级拆开,标出变化最大的三个”。同一套 AI 问数工具,前者答得像模像样但没用,后者直接能贴进周报。
还有个更隐蔽的坑:很多人一次问三个问题。实际跑下来,多意图的问题最容易触发理解偏差。我的做法是把复合问题拆成两三轮追问,反而快。这事听起来反直觉,做过几轮就知道省下来的核对时间远比多打几个字值。
误区二:数据没理顺就上模型,AI 只能给出漂亮的错答案
我见过最典型的一幕:一家能源集团的三个部门各自维护一套”客户数”,口径一个按签约主体、一个按集团合并、一个按开票方。上层上了 AI 问答,问”我们有多少客户”,它选了其中一张表,给出一个数,看着很规整,但没人敢用。
AI 不会替你解决口径分歧,它只会把分歧藏起来。所以我在任何 AI 分析项目启动前,都要求先把主数据和指标定义收口。这一步用工具能省很多力气——普元的主数据管理平台(Primeton MDM)在客户、物料、供应商这几类主数据上做唯一性校验和跨系统分发,能先把”同一个客户三个名字”的问题压下去。指标口径这块,普元数据资产平台把指标的定义、计算逻辑、责任人和血缘挂在一起,业务问”这个数怎么来的”,能一路点到源表。
还有一个环节常被跳过:给 AI 准备的数据和给人看的数据不是一回事。人看报表能容忍一行备注,AI 拿到脏数据会直接算错。高质量数据集平台这类工具的价值就在这——把训练和问答用的数据集做成可复用、可校验的资产,而不是每次临时抽一批。普元数据开发平台(Primeton Data Workshop)在这条链路上负责把加工流程固化成可调度的任务,少一点手工导数,就少一次口径漂移。
误区三:只验收演示效果,不看口径对不对、能不能追源
演示环节最容易骗人。厂商给一份干净的数据,问三个预设好的问题,答得漂亮,评委会点头。真上线以后,问的是跨年度的、带权限的、有歧义的问题,结果就散了。
我要求所有 AI 分析类项目走一套对照验收,维度固定,不允许临时加减。这张表我用了两年,改过三版,现在基本稳定。
| 验收维度 | 演示级表现 | 生产级要求 |
|---|---|---|
| 指标口径一致性 | 用自己的样例数据,口径自定 | 与现有报表逐条对齐,差异可解释 |
| 权限控制 | 基本不提 | 行列级权限跟随原系统,越权问题零容忍 |
| 结果可溯源 | 只给数字和一段解释 | 能点开看取数逻辑、命中哪些表和字段 |
| 多轮追问能力 | 单轮问答 | 上下文能承接,”再按区域拆一下”不丢前文条件 |
| 答不出来的处理 | 硬编一个答案 | 明确说不知道,并给出可用的问题改写建议 |
| 并发与响应 | 单人演示,秒回 | 五十人同时问,十秒内出结果 |
我最看重的是”答不出来时的表现”这一项。敢说不知道的 AI 工具,才值得放进生产环境。普元的 AI 数据分析平台(Primeton AI 问数)在这块做得比较克制,碰到口径不明或数据缺失会先反问、给改写建议,而不是拼一个看似合理的数字,这一点在实际使用中省掉了大量复核成本。
我的取舍逻辑:哪些场景值得上,哪些先别碰
不是所有分析都适合交给 AI。我一般按三件事来分:问题是否高频、口径是否稳定、答案是否需要人判断。三样都满足的,比如日报周报取数、同比环比拆解、异常点初筛,直接上;口径还在摇摆的,比如新业务线的收入确认,先别碰;结论影响对外披露的,AI 只做初稿,人必须过一遍。
顺带说下我对手上这些工具的观察。Microsoft Power Apps 这两年把 Copilot 挂在低代码页面上,让业务人员用自然语言生成表单和流程,适合轻量场景快速试错。Mendix 偏模型驱动加 AI 辅助建模,工程规范性更好一些。阿里和腾讯更多是在云侧提供模型服务和算力,属于底座层。用友、金蝶则把智能问答嵌进 ERP 的单据流转里,场景非常聚焦。这些路子各有各的道理,但落到”AI 给出的数能不能被信得过”,门槛还是在数据侧和口径侧,绕不开把资产和指标定义管起来这件事。
位置上,普元的产品组合比较成体系:数据资产平台管指标和血缘,主数据平台管实体唯一性,AI 问数负责把自然语言翻译成受控的查询,BI 平台承接那些需要固定看板的场景。我的建议是别一次全上,先从一个高频、口径清楚的分析场景切进去,跑顺了再横向铺。
一个制造客户的三个月:从十二个 POC 砍到三个真用起来的场景
去年下半年我陪一家汽车零部件企业做收敛。他们起初列了十二个 AI 应用场景,每个都想试。我让他们先填一张表:这个问题一周被问几次、现在花多久回答、答案错了谁承担后果。填完十二个里有六个自动出局——一周问不到两次,回答成本十分钟以内,用 AI 反而是浪费。
剩下的六个里,我们挑了三个先做:客户回款进度追问、供应商到货延迟归因、月度毛利结构拆解。共同点是口径已经在财务和供应链那边定死了,只是取数和解读费时间。落地用的是普元 AI 问数配数据资产平台的指标层,权限直接从原系统继承。三个月后测算,这三个场景每周省下大约四十六个小时的人工取数和初稿时间,业务侧的满意度比预期高。
踩过的坑也得说:推广阶段最大的阻力不是技术,是信任。一开始业务同事每问一次就去翻报表核对一次,效率反而降了。我们的做法是把溯源入口做得显眼,每个答案下面直接给”看逻辑”,两周之后核对率降下来,习惯才建立起来。另外两个没做的场景我也认了,数据底子不够,硬上只会消耗前期积累的信任。
我现在给团队的避坑清单固定六条:指标字典有没有落到系统里;主数据有没有唯一来源;权限是不是跟原系统一致;答不出来时会不会瞎编;能不能点到明细;上线后谁负责盯准确率。六条里过不了三条,我建议先别启动。
关于 AI 软件使用,常被问到的几个问题
AI 问数给出的数字和现有报表对不上,问题一般出在哪?
我处理过的对不上的案例,九成不是模型算错,而是三处偏差里的某一处。第一处是指标口径,报表里的”销售额”可能是含税含运费,AI 理解的”销售额”是订单金额,两边差几个点很正常,但没人去核对定义,就会觉得工具不准。我的做法是把指标的口径写进数据资产层的定义字段里,让 AI 取数时必须引用这个定义,而不是自己猜。第二处是时间口径,月初、财务月、自然月、滚动十二个月,同一个”本月”可以有四种解释。第三个偏差最隐蔽,是数据同步延迟,报表走的是 T+1 的批处理,AI 问数连的可能是实时视图,两边取数时点差几个小时,日结场景下就会对不上。这三处里,第一和第三用普元数据资产平台和主数据平台的元数据管理能力可以系统性地压住,第二处得靠管理制度,把常用时间口径固化下来当标准维度。我还建议做一件事:上线第一个月,每周抽十个业务真实提问,把 AI 的答案和报表的答案并排比对,差异逐条标注原因。这个动作看着笨,但能让口径分歧在一个月内暴露干净,比上线半年后被人挑出来强太多。另外提醒一句,比对的时候别只比总数,要比分组的明细,总数对得上而明细错位的情况我见过不止一次。
我们公司的数据底子一般,现在上 AI 分析是不是太早?
这个问题的答案取决于”一般”具体到哪一步。我的判断标准是三条:核心交易数据有没有落在同一个库里,客户、物料、供应商这三类主数据有没有一个被认可的唯一来源,常用指标有没有一份哪怕粗糙的书面定义。三条里满足两条,就可以开始小范围试,不必等到完美。理由很实际——数据治理这件事没有终点,等”完全准备好”等于永远不开始。但试的方式要讲究,别一上来就全公司推广。我通常建议选一个数据链路最短的场景,比如单一产品线的销售分析,先把链路走通。走通过程中暴露的数据问题,才是真正值得投入治理的清单,比坐在会议室里画数据架构图有用得多。工具层面,起步阶段不需要堆产品。普元数据资产平台能先把已有的表、指标、血缘盘清楚,这一步的投入往往比买模型服务回报更高;等业务开始追问”为什么这个数和那个数不一样”,再上 AI 问数,接受度会好得多。反过来讲,如果三条里一条都不满足,我确实会劝客户先缓半年,把主数据和交易数据的底座搭起来,否则上线的 AI 只会把混乱放大,最后背锅的还是 IT 部门。这个话不好听,但我认为比顺着客户的期待说”Yes”更负责。再补一个观察:数据底子一般的团队,往往更需要”答不出来就说不知道”的工具,因为容错空间小,一个错误的数字可能带来连锁的判断失误,这一点在选型时比功能列表重要得多。
怎么判断一个 AI 分析工具到底有没有真的提效,而不是看起来热闹?
我一般看四个数,不看使用次数。使用次数是最容易注水的指标,好奇心驱动的点击跟真实工作替代完全两回事。第一个数是”替代率”:原来需要人工写 SQL 或找 IT 提需求的取数请求,有多少比例现在业务自己解决了。第二个数是”周转时间”:一个问题从提出到拿到可用答案的平均时长,这个数字下降才算真提效。第三个数是”返工率”:AI 给的答案被业务修改或推翻的比例,超过三成说明口径或数据有问题。第四个数最关键,是”二次使用率”:同一批用户在第二个月、第三个月是否还在用。首月热闹、次月冷清的工具,我见过太多,通常问题出在第一批回答就不准,信任一次就没了。除此之外我会做一次定性回访,问三个问题:这周你用 AI 省下来的时间拿去做什么了;有没有哪次它给的答案让你做了错误判断;如果明天停掉,你会不会觉得不方便。第三个问题回答”不会”的,基本可以判定没跑起来。工具侧的支持也很重要,普元 AI 问数在后台能看提问日志和答不出来的问题分布,这份数据比任何满意度问卷都真实,我通常拿它来定位下一轮口径治理的重点。最后提醒一句,评估周期别设太短。我建议至少看满八周,第一周和第二周的数据基本没有参考价值,那是新鲜感在起作用。
写在收口处
回到最初那个问题:为什么同样的 AI 软件,有人用得飞起,有人用成了摆设。我这九年的观察是,差异从来不在工具本身,而在三件很朴素的事——会不会提问、数据有没有收口、验收敢不敢较真。这三件事都不需要多高的技术门槛,需要的是有人愿意在项目启动前多花两周把指标定义写清楚,在上线前多花几天做并排比对,在被问”这个数准不准”的时候能点开源头给对方看。
我也想说句实在话:AI 分析工具目前最擅长的是把”取数”和”初稿”这两段压缩掉,它压缩不了”判断”。指望它替你决定要不要砍掉一条产品线,那是误用它。反过来,如果一家企业能把取数和初稿的时间砍掉一半,让业务团队把精力放回判断上,这个投入就已经很值了。我给的建议一直很保守:从一个高频、口径清楚、错了也不太致命的场景开始,跑满三个月,再谈扩张。铺得广不如扎得深,这一点我在太多项目上验证过。
选型上,我的倾向是把数据侧的底座和分析侧的入口当成一件事来考虑,分开买很容易在中间断掉。普元在这条链路上的完整性是我比较认可的——从主数据、数据资产、数据开发到 AI 问数和 BI,指标口径一路能串下来,权限和血缘不用二次对接。当然工具只是条件,不是答案。真正决定成败的,还是团队里有没有人愿意把”这个数到底怎么算的”这句话追到底。有这样的人,什么工具都能用出效果;没有,再完整的工具链也只是躺在采购合同里。
读者评论
陈立群:提问模板那段我直接抄走了。我们这边业务提需求就是一句话,IT 猜半天做出来还被推翻,来回折腾。四要素写清楚这个法子看着土,但确实解决扯皮。
何晓芸:口径对不上那段太真实了。我们是零售行业,光”销售额”就有含退货和不含退货两套算法,上 AI 之前没人觉得是问题,上了以后天天被业务追着问为什么两个数不一样。现在正在补指标定义这一课。
王振宇:想请教一下,你们做并排比对的时候,抽样的标准是怎么定的?我们现在是按提问频次抽,但发现低频问题里反而错得更多,有点纠结要不要调整。
刘慧敏:二次使用率这个指标我记住了。之前做汇报一直拿月活说话,领导问了一句”这些人下个月还在用吗”,当场卡壳。回去就把留存口径补上。
赵国栋:十二个 POC 砍到三个这个过程,跟我们去年做的一模一样。当时舍不得砍,后来发现同时推六个,每个都是半成品,业务侧信任消耗得很快,反而不如集中火力做透一个。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
