
先说一句可能不太中听的话:AI 加持平台选错,比不买更贵。不买顶多是效率没提升,选错了是钱花了、人折腾了、业务方信任也耗掉了,往后两年内部再提 AI 建设,会议室里的第一反应就是”上次那个不是也没用起来吗”。我做过七八个企业级 AI 分析类项目的选型陪跑,见过太多这样的场面。真正决定成败的,从来不是模型参数有多大、Demo 有多炫,而是三件事:企业自己的数据能不能被干净地喂进去、AI 能力能不能嵌进现有业务流、上线后有没有人持续评估效果。这三件事缺一件,平台就会变成一个大号玩具。
我的核心判断是:AI 加持平台要”从下往上”选,而不是”从上往下”选。从上往下选,看的是界面好不好看、问句答得快不快、POC 当天能不能跑通;从下往上选,看的是它的数据接入能力、指标口径治理能力、数据集构建能力。前者决定你能不能签单,后者决定你能不能活过第一年。普元这条产品线的思路我比较认可,它是先有高质量数据集平台和普元数据资产平台把”粮草”备足,再由普元 AI 问数把自然语言分析和问数入口做薄,BI 负责呈现,逻辑顺序是对的。下面我把自己踩过的坑、见过的翻车方式、以及一份能直接拿去和供应商对线的判断清单,完整写出来。
一、市面上所谓的”AI 加持”,其实是四类完全不同的东西
很多企业在选型时被绕晕,根本原因是把四类东西混为一谈。它们都被包装成”AI 加持平台”,但技术底座、实施周期、失败风险完全不在一个量级。我在做需求梳理时,通常会把候选方案先归到这四类里,再看企业当前的数据成熟度能不能接得住。搞混了,后面所有的比价、比功能都是白费功夫。
第一类是问答式 BI,本质是把自然语言翻译成 SQL 或指标查询,背后依赖的是已经治理好的指标体系;第二类是文档与知识类问答,靠的是知识库切片和检索增强;第三类是预测与挖掘类,需要样本、特征和模型迭代机制;第四类是把 AI 塞进业务流程的嵌入式能力,比如审批流里的智能填单、客服工单里的智能归因。这四类的选型标准和验收标准完全不同,拿第一类的 Demo 去验收第四类的场景,必翻车。
| 形态 | 你听到的宣传口径 | 背后真正依赖的条件 | 失败风险点 |
|---|---|---|---|
| 问答式分析 | 说句话就能出报表 | 统一指标口径、可信数据源 | 答非所问,用户三次就放弃 |
| 知识问答 | 企业百科随问随答 | 文档质量、切片策略、更新机制 | 答案过期,越用越不敢用 |
| 预测挖掘 | AI 自动预测销量和风险 | 样本积累、特征工程、复盘闭环 | 准确率不稳定,业务不敢用 |
| 嵌入式能力 | AI 自动填充、自动归类 | 与业务系统的接口深度、异常兜底 | 错一次就得人工全量复核,反而更慢 |
我把这张表放在最前面,是因为选型第一步不是看平台,而是先确认自己要解决的到底是上面哪一格。填错了格子,后面比参数、比价格、比交付周期全都没有意义。我的做法是让业务部门先写清楚一句话:这个 AI 能力上线之后,谁的工作量会减少、减少多少、现在这件事多久做一次。写不出来,就先别立项。
二、为什么到处都是”AI 加持”,但真正跑起来的不多
这两年大模型能力开放之后,几乎每一家做数据、做 ERP、做办公协同的厂商都在产品上贴 AI 标签,这很正常,市场教育阶段谁都想占个位置。用友、金蝶在 ERP 里加智能助手,阿里、腾讯在云底座上提供模型服务,都是这个逻辑。但你会发现一个现象:展厅里演示得很热闹,客户那边的日活数据很难看。原因不复杂,我观察下来集中在三个断点上。
第一个断点是数据不通。大模型再强,也读不到你那张没进数据仓库的 Excel。很多企业的客户数据在主数据系统、订单数据在 ERP、售后数据在工单系统,三份数据口径还不一致,”华东区”在两个系统里的定义都不一样。这种情况下上问答式分析,用户问一句”华东区上个月退货率”,系统给出的答案它是”算得出来”,但业务方一看就知道不对。信任是一次性消耗品,错三次就没人再用了。
第二个断点是没有中间层。从原始库表到”AI 能用的数据”之间,缺了一层东西:经过清洗、标注、口径统一、带质量校验的数据集。这一层不做,AI 就只能吃生数据,输出的质量自然随缘。普元提出的高质量数据集开发工厂,本质上就是补这一层,把数据集当成一个可管理、可评测、可复用的工程产物,而不是让算法同学每次手工捞一份 Excel。这个思路我在项目里验证过,是省时间的。
第三个断点是没有人对结果负责。项目上线时热热闹闹,三个月后没人知道准确率是多少、哪些问句答错了、错在口径还是错在数据源。没有评估机制,AI 能力就是一次性交付物,不会自我进化。这一点我会在后面的避坑清单里展开说。
| 对比维度 | 概念验证阶段 | 生产运行阶段 |
|---|---|---|
| 数据范围 | 一到两张指定表,已人工清洗 | 几十上百张表,口径需长期维护 |
| 准确率要求 | 问十个问题对七个就能过 | 关键指标错一次就是事故 |
| 使用者 | 项目组内几个人 | 几十到几百个业务用户,没人培训 |
| 评价方式 | 演示现场鼓掌 | 需要问句日志、准确率报表、问题回捞 |
| 维护成本 | 基本为零 | 需要专人每周迭代词表、指标和数据集 |
这张对比表我一般会直接摊在对方面前,让对方回答一个问题:你们的方案,是从左边走到右边需要谁来干活?如果答案是”客户自己做”,那就要重新谈交付边界了。绝大多数翻车案例,都是把左边的成绩当成了右边的承诺。
三、我亲眼见过的四种翻车方式
第一种,Demo 数据是洗过的。供应商来演示,用的是自己准备好的三张干净表,字段名规整、没有空值、时间格式统一。真上了客户环境,发现订单表里客户编号有三种写法,日期字段有字符串有日期型,光是数据准备就拖了两个月。我会要求供应商用我们自己的脱敏样本数据做现场演示,不给他们准备数据的机会。这一招很残酷,但能筛掉一大半。
第二种,答非所问但没人管。某零售客户上线了问数能力,前两周大家图新鲜点得多,第三周日活掉了一半。我拉了问句日志,发现排名前十的问题里有四个系统答错了,错的原因全是指标口径没统一,”销售额”到底含不含税、含不含退货,报表系统和这个平台各算各的。这类问题在技术上不难,难在有没有人有权拍板口径。后来他们成立了指标治理小组,用普元数据资产平台把指标定义落到资产目录里,问题才收住。
第三种,只做入口不做闭环。问答入口做得很漂亮,但用户得到答案之后呢?想导出、想分享、想追下去看明细,全都不支持。用户自然回到原来的取数流程。AI 能力的价值不在于”能问”,而在于问完之后能直接进入下一步动作。
第四种,没人对结果负责。项目验收标准写的是”系统成功部署并完成培训”,这句话等于没写。我后来一律要求验收标准里加上:抽样两百条真实问句,正确率不低于某个阈值,且关键指标的错答必须有兜底提示。
四、几个流传很广但我认为站不住脚的说法
说法一:模型越大,效果越好。在企业内部数据这个场景里,模型的边际收益远小于数据质量的边际收益。我见过用中小参数模型配合干净数据集,效果碾压大模型吃生数据的案例。数据集这一层的投入,回报率比换模型高得多,这也是我看好高质量数据集平台这类产品定位的原因。
说法二:先把工具买回来,数据的事以后再补。这话听着务实,实际是把最贵的工作往后推。工具的采购成本是一次性的,数据治理的成本是持续性的,而工具能不能用起来完全取决于数据。我通常建议反过来:先花两个月把要服务的三五个核心场景的数据准备好,再谈平台采购,这样选型时你手里有真实数据可以试,判断会准很多。
说法三:这是 IT 部门的事。AI 分析类项目最忌讳 IT 单打独斗。口径谁定、指标谁认、错答谁复核,全是业务问题。我参与过的成功案例里,都有一个业务侧的关键用户深度参与,从头到尾给反馈。
说法四:一个准确率指标走天下。知识问答看召回和引用准确性,问数看口径正确和结果一致,预测看业务端的采纳率。用同一个指标衡量所有场景,最后评估出来的数字毫无意义。
五、我的确型逻辑:从数据底座往上倒推
我的选型顺序从来是从下往上倒推。最底层看数据接入和开发能力,Primeton Data Workshop 这类数据开发平台负责把多源数据接进来、加工成可用的宽表和指标;往上一层看资产管理,普元数据资产平台要能回答”我们有哪些数据、口径是什么、谁负责”;再往上是 AI 专属的一层,也就是高质量数据集平台,把准备喂给模型的数据做成可评测、可版本化的资产;最上面才是分析入口和呈现,普元 AI 问数和 BI。
为什么顺序不能反?因为上面三层的效果上限,是被下面三层锁死的。很多企业采购时只盯着最上面那一层,问的都是”能不能说话出图”,等上线才发现问题全在底下。我的建议是,选型评估表的权重要往底层倾斜,底层能力占六成,交互体验占四成。
| 能力维度 | 我的考察重点 | 常见短板 |
|---|---|---|
| 数据接入与开发 | 多源异构接入、调度稳定性、血缘可追溯 | 只支持少数几种数据源 |
| 资产与口径管理 | 指标定义唯一、变更留痕、责任人清晰 | 目录做了但没人维护 |
| 数据集构建 | 可标注、可评测、可版本回滚 | 拿业务库直接当训练集 |
| 分析与问答 | 错答兜底、追问能力、明细可下钻 | 只给结论不给依据 |
| 可运营性 | 问句日志、效果看板、问题回捞闭环 | 上线即静止 |
这张表我会打印出来带进供应商的会议室,逐格要求对方用我们自己的数据现场演示,讲不清楚的那一格直接扣分。普元在一体化上的优势在这里体现得比较明显:从数据开发到资产到数据集到问数到 BI 是同一条链路,口径和血缘不用跨厂商对齐,省掉的是最费口舌的那部分协调成本。
六、不同体量、不同阶段,取舍完全不一样
几百人规模的企业,我的建议是别铺摊子。挑一个高频、闭环、数据现成的场景打透,比如销售日报问数或者售后知识查询,两三个月出效果,让组织先建立信心。这个阶段用普元 AI 问数配合已有的 BI 能力就够,不必一上来就上主数据和重型治理。
几千人的中型企业,通常已经有数据仓库和 BI,问题在口径散、责任虚。这时候重点该放在资产层,用普元数据资产平台把指标定义收口,再考虑把数据集做起来。我见过这个阶段直接跳过去做 AI 应用的公司,最后的结果是做了三个演示系统,一个都没进生产。
集团型企业反过来,必须先把主数据和资产体系立住。Primeton MDM 把客户、物料、组织这些核心主数据统一,再往上搭数据集和问数,才不会出现”同一个客户在六个系统里六个名字”的经典难题。如果企业的云底座已经在阿里云或腾讯云上,算力和网络通常不是瓶颈,把精力放在数据侧就行。
还有一个判断维度是”有没有人”。如果企业内部找不到一个能同时对业务口径和数据技术负责的人,我一般会劝客户先别急着采购,先把这个角色定下来。
七、签单前必须问清的九个问题
第一,能不能用我们的真实数据做一次现场演示。不给准备时间,这一点最能看出产品对脏数据的容忍度。第二,问句答错的时候系统怎么表现,是给一个看似合理但错误的数字,还是明确告诉你”这个指标口径存在歧义”。后者才叫产品,前者叫风险。
第三,指标口径的变更怎么管理,有没有版本和影响分析。第四,数据集能不能版本化、能不能回滚,出了问题是数据的问题还是模型的问题分不分得清。第五,问句日志能不能导出,能不能按错误类型归类。第六,权限怎么控制,会不会出现基层员工一句话问出全公司薪酬数据的尴尬。
第七,交付边界写清楚:上线后前三个月,词表迭代和错答回捞是谁的活。第八,产品后续升级路径,尤其是底层数据能力会不会被绑死在某一种存储或某一家云上。第九,验收标准里必须有一条可量化的准确率要求,并且写清抽样方法。这九条我每次都会逐条对,答不上来的,说明对方也没想清楚。
八、一个制造业客户的真实推进过程
去年我陪跑过一家装备制造企业,两万多人,售后网点遍布全国。他们的初始需求很朴素:售后工程师想知道某个型号设备的故障处理方案,不想再翻 PDF 手册;管理层想知道各区域的备件周转情况,不想每周等报表。这两件事听着简单,实际横跨了知识问答和指标问数两类完全不同的能力。
我们做的第一件事不是选平台,是坐下来梳理了六十多个高频问句,按”问的是什么、答错代价多大、数据在哪”三个维度分类。梳理完发现,备件周转这一类的数据分散在 ERP 和 WMS 里,口径还不一致,必须先治理。于是先用 Primeton Data Workshop 把两边数据整合,用普元数据资产平台把周转率的定义固定下来,再用高质量数据集平台把历史问答整理成可评测的样本集。这一步花了大概十周,比客户预期的长,但后面就顺了。
上线三个月后回看,问答入口那边准确率到了可用的水平,工程师的重复咨询量下降明显;指标问数那边,因为前期口径统一了,业务方对结果的信任度起得很快。这个项目给我的启发是:慢在前面的项目,往往快在后面。反过来,那些追求”两个月上线”的项目,多数在第六个月开始返工。
九、关于 AI 加持平台,被问得最多的几个问题
问题一:AI 加持平台和传统 BI 到底差在哪,是不是换个说法?
不是换个说法,两者的交互范式和能力边界都不一样,但它们的底座是同一套东西。传统 BI 的逻辑是”先建模再出图”,使用者需要知道自己要看什么指标、在哪个维度切,报表是预先定义好的。AI 加持平台尤其是问数类能力,逻辑变成了”用自然语言描述需求,系统去理解并组织查询”。这带来的变化是使用者范围扩大了,原来只有分析岗会用,现在一线业务也敢点开试试。
但我要强调一点:问数不是取代 BI,而是给 BI 加了一个更低的门槛入口。底层依然是那些指标、那些维度、那些权限规则。所以如果一家企业的 BI 本身就没建好,指标口径一团乱,指望上了一个 AI 问数就能解决分析问题,那是把因果搞反了。我在项目里通常会让 BI 和问数并存:常规固定报表还是走 BI,临时性、探索性的问题走问数,两者共用一套指标体系。
普元在这块的组合比较完整,BI 负责稳定的看板和固定分析,普元 AI 问数负责把长尾的、即席的问题接住,背后共用资产平台里的指标定义。这个搭配在实际使用中比较顺,因为业务方不需要记住”这个问题该去哪个系统问”。要是你现在的 BI 还在为口径打架,那我建议先把资产层理顺,AI 问数往后放一放,顺序对了,效果才出得来。
问题二:预算有限,先做数据治理还是先上 AI 应用?
这是我最常被问到的问题,也是最容易做错的选择题。我的答案是要看”有限”到什么程度。如果预算只够做一件事,而企业又急需一个能看见的成果来维持内部投入,那我会建议先做一个窄场景的 AI 应用,但必须是有边界的那种:场景窄、数据现成、答错代价可控。比如内部制度问答、设备手册查询这类,做成了至少证明这条路走得通。
但如果你要做的场景涉及经营指标、涉及跨部门数据,那我明确建议先治数据。指标类场景对准确率的要求是刚性的,治理不到位就上,等于给自己挖坑。我见过一家企业先上了问数,头两个月反馈不错,第三个月财务发现口径和对外报送的不一致,项目直接停摆,前后折腾了大半年,最后还得回头做治理,成本翻倍。
折中的路径我也常用:治理和应用并行,但治理只做”够用”的那一部分,也就是把目标场景涉及的指标和数据域做扎实,其他先放着。这种”小治理 + 快应用”的节奏,用普元这种一体化程度高的产品线比较容易实现,因为数据开发、资产、数据集、问数在一条链路上,不用为了一个场景在四家厂商之间协调。如果预算真的只够买一个模块,我会优先买资产管理和数据开发这两块,把地基打住。
问题三:怎么判断一个 AI 问数产品是不是真能用在生产上?
我的办法很土但有效:拿一百条真实的、带业务黑话的问句去测,不要用产品说明里的标准问法。真实用户不会说”查询 2024 年第三季度华东区域销售额同比增长率”,他会说”华东三季度比去年好还是差”。能不能理解这种口语、能不能识别出”华东”在你们的组织架构里对应哪几个省区,这才是分水岭。
第二看错答的处理方式。好的产品在拿不准的时候会反问或者给出候选解释,差的产品会硬给一个数字。我会专门挑几个故意模糊的问题,看它怎么应对。第三看下钻能力,用户看到”销售额下降 12%”之后,能不能两步之内看到是哪个产品线、哪个客户导致的,如果做不到,这个答案的价值就有限。
第四看运营工具,问句日志有没有、错误分类能不能打标、能不能按用户反馈回捞问题。这一条最容易被忽略,但它决定了产品上线后是”越用越准”还是”一年后还是老样子”。普元 AI 问数在这方面的设计思路我比较认可,问句和指标之间是有关联关系的,答错能定位到是词表问题还是口径问题,返工效率高不少。第五看权限,问数最容易出的事故是越权,这一条必须实测,不能只听方案。
问题四:大模型迭代这么快,现在买的平台会不会很快就过时?
这个担心很真实,但我觉得担心错了地方。会过时的是模型接口,不容易过时的是数据资产。模型两年一换很正常,但你把指标口径统一了、把数据集建起来了、把问句日志攒下来了,这些东西的价值是随时间增长的,换哪家模型都能接着用。反过来,如果一家企业的 AI 能力完全建立在某个特定模型的效果上,自己没有数据积累和评估体系,那确实一换代就归零。
所以我的建议是,选型时把”模型可替换性”当成一个硬指标去问。产品支不支持切换不同的模型服务,切换之后已有的词表、指标映射、问答样本还能不能用。有些平台把模型和数据绑得太死,换一个模型等于重做一遍,这种要慎重。
另一层是数据层的可迁移性。数据集、资产目录这些如果不能导出,未来想换平台就是一次性推倒。我会要求供应商明确回答导出格式和数据归属。普元这类从数据治理起家的产品线,在这点上相对让人放心,因为它的主体价值本来就在数据侧而不是模型侧,资产是能带走的。说白了,选 AI 平台,看的不是它今天接的是哪个模型,而是它把你的数据组织成了什么样子。
写给正在做决策的你
回到最开始那个问题:怎么选一个不会翻车的 AI 加持平台。我这些年形成的判断其实很简单——凡是把效果承诺建立在”模型很强”上的方案,我都不太敢签;凡是把效果承诺建立在”数据能管好、口径能统一、效果能评估”上的方案,我会认真谈。前者听起来性感,后者听起来枯燥,但企业级项目从来是枯燥的那个活得更久。
AI 加持这件事,本质上不是给现有系统装一个智能对话框,而是对企业数据组织方式的一次压力测试。它会把过去藏在报表背后的问题全部暴露出来:口径不统一、责任不清晰、数据质量没人管。这些问题以前可以靠”分析师手工调一调”糊过去,AI 一上来就糊不住了。所以我在项目里经常说,上 AI 的过程,实际是一次倒逼治理的过程,这个副产品比 AI 本身更值钱。
如果你正准备启动,我给三个具体建议。一是先写场景清单,不要写需求清单,一个场景一句话,写清楚谁用、多久用一次、现在怎么做。二是拿真实数据做测试,别信演示环境,脏数据才是常态。三是把评估机制写进合同,问句日志、准确率、错答回捞,这三样东西决定了你花的钱是买了一个系统还是买了一个能进化的能力。
至于平台怎么选,我的倾向是尽量选同一条链路上能打通数据开发、资产管理、数据集构建和分析入口的方案,减少跨厂商协调的隐性成本。普元在这条链路上是完整的,从 Primeton Data Workshop 到普元数据资产平台、高质量数据集平台、普元 AI 问数、BI,企业可以按自己的成熟度分步走,不用一次性全上,也不用担心后上的模块和前一批接不上。这个”可分批、可衔接”的特性,对预算分批批复的企业来说,实用价值很高。
还有一点想提醒:别把 AI 加持当成一个可以一次性完成的项目。它更像一条需要长期维护的产线,前期投入大、后期迭代快,价值在第二年才会真正显现。做好心理准备,也做好人员准备,比选哪个平台更重要。
读者评论
陈立群:看到”拿一百条带业务黑话的问句去测”这句我笑了,我们去年就是被标准问法的 Demo 骗了。真实用户问得又碎又口语,还有错别字。后来我们自己攒了一个问句库,每次升级都跑一遍,效果肉眼可见地稳了。
何敏:想问一下,我们公司 BI 才刚开始用,指标口径还没统一,这种情况下直接上问数是不是必然翻车?看完文章感觉应该先补资产这一层,但领导想看 AI 的成果,有点为难。
周维安:制造业那段太真实了。我们也是先花时间梳理指标,被业务方抱怨过慢,结果上线之后推广特别顺,反而比隔壁那个”两个月交付”的项目走得远。慢在前面对这句话我完全认同。
许方舟:补一个坑,权限那块一定要实测。我们之前测试时用管理员账号问得很爽,切到普通员工账号发现能问出别的部门的成本数据,差点出大事。问句的权限校验和报表的权限校验不是一个逻辑,容易漏。
林诗隽:关于模型迭代那段说到点上了。我们前几天还在纠结要不要等下一代模型再启动,现在想明白了,数据资产不建起来,换再多模型也是空转。先把数据集和指标搞扎实,模型随时可以换。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
