
核心判断:这件事的验收人是一线员工,不是IT部门
我做过几个企业内部AI问答的落地项目,最常听到的一句话是:模型挺聪明,但我们的人不用。听着刺耳,可这就是很多团队把公网大模型入口替换掉之后的真实处境。技术上做替换,快的话两周就能切完;可要让一线员工从”遇事问同事、翻表格、打电话”变成”先问一句AI”,往往得花半年,还得有人天天盯着改问法、补口径。我的判断很直接:替代外部公网模型入口值不值,不看模型跑分,也不看架构图画得漂不漂亮,只看一件事——业务、客服、财务、生产那批人,愿不愿意每天主动打开它。
他们打开的频次,比任何技术评审都诚实。原因也不复杂,员工不会为了支持公司的技术路线去改习惯,只会为了自己少加班、少挨骂、少跑腿而改习惯。所以我在做方案时会先问三个问题:员工在他每天必开的那套系统里,能不能直接问?他问的那句话带不带岗位黑话,系统听不听得懂?给出的数字,他敢不敢原样贴进周报?这三个问题答不上来,再贵的模型也是摆设。
普元在这条路上的思路我比较认同:先解决”数能不能被问准”,再谈界面和交互,这个顺序是对的。很多项目一上来就折腾模型选型、折腾对话框皮肤,数据那头还是十几套口径、几十个版本的主数据,员工问三次得到三个数,第四次就不问了。我见过太多这样的半成品。所以这篇文字,我想按一线员工的视角,把”替换之后到底好不好用”这件事拆开讲,包括怎么判断、哪里容易踩坑、不同规模的企业该怎么取舍。
员工嘴上的抱怨,和背后的真实原因经常对不上
有一家企业的IT部门花了两个月,把外部大模型的调用换成了内部服务,上线当天群里一片叫好。一个月后我去看后台,日活掉到个位数,问得最多的问题是”今天天气怎么样”。这说明什么?说明员工根本没把它当工具,只当新鲜玩具。后来我们把入口嵌进他们每天要开的业务系统,又把”我名下客户本月回款多少”这类句子做成常用问法,日活才慢慢爬回来。
我在现场记过一本小账,员工抱怨的那句话,和真实原因经常不是一回事。把抱怨翻译成工程问题,是这件事能不能做成的分水岭。下面这张表我反复用过,可以直接拿去对。
| 问出来的数不对 | 指标口径没统一,两个部门两个算法 | 主数据、指标定义有没有落到平台里 |
| 答得太慢,等不起 | 查询直接打在明细表上,扫全量数据 | 有没有语义层、有没有预聚合 |
| 看不懂,不敢用 | 结果没有来源标注,无法追溯 | 能不能点开看到来源表和数据时间 |
| 换个说法就听不懂了 | 缺业务同义词和行业术语的维护 | 同义词、别名有没有人在持续补 |
| 找不着在哪儿问 | 入口藏在另一个不相关的系统里 | 有没有嵌进日常办公和业务界面 |
| 不敢问敏感的东西 | 权限没有按岗位和组织细到行级 | 权限模型是不是跟着组织架构走 |
这张表最大的价值,是能把”AI不好用”这种模糊反馈,拆成一个个能改的工程问题。我遇到过一个团队,员工说答得慢,他们就去换更大的模型,钱花了不少,速度更慢了——真实原因是查询直接打在明细表上,一次问答扫几千万行。这种事换模型救不了,得在语义层和预聚合上动手。一线的抱怨永远是对的,只是他们给的诊断往往是错的。
直连公网模型和内部数据问答入口,差的不是模型,是”数”
把员工直接连到公网大模型,早期的好处是省事,一个账号就能用。用上三个月,问题会集中冒出来:数据出不出边界、答的东西对不对、口径跟公司报表对不对得上、问出来的东西能不能落到考核。我在做取舍评估的时候,会把这两条路线放在一张表上对着看,比讲一堆道理有用。
| 数据边界 | 提问内容会离开企业 | 数据留在企业内网 | 这一条基本就是一票否决 |
| 答案依据 | 通用知识加模型记忆 | 企业指标、主数据、报表 | 员工要的是自家数,不是常识 |
| 口径一致性 | 一人一个说法 | 统一指标口径,一处定义 | 口径不统一,用三天就散 |
| 权限控制 | 一个账号看到的东西一样 | 按组织、岗位、行级授权 | 销售不该看到别区的毛利 |
| 数据时效 | 训练之后的事它不知道 | 连实时业务库和数仓 | 问昨天的单量,不能给上月 |
| 可维护性 | 模型迭代节奏不受控 | 语义层、问法自己维护 | 业务变了得能马上改 |
| 员工黏性 | 新鲜三天 | 每天顺手用 | 这才是真正的验收指标 |
看完这张表,结论其实不用我多说。替换真正的技术难点不在模型侧,而在数据侧:语义层、指标口径、主数据、权限,这四样东西决定了员工问一句话能不能拿到能用的答案。普元在这块的积累,恰恰是在数据这一层——主数据、数据资产、数据开发、数据集、BI,这条链条是通的,所以它做AI问数的时候,不用从零去补数据底子,这一点在项目排期上能省下很多来回。
员工弃用的六条根因,我画成了一张鱼骨图
项目做多了会发现,员工不用一个工具,原因就那么几类,而且八成不在模型能力上。我习惯在复盘会上把这张鱼骨图摊开,让业务方自己指,指到哪一条,就改哪一条,比空谈”再优化优化体验”具体得多。
员工弃用
数据口径不统一
入口分散找不到
答非所问听不懂
响应慢等不起
没人维护更新
结果不敢信不敢用
数据侧
入口侧
理解侧
六条里真正难啃的是”没人维护更新”这一条。上线时把常用的两百个问题配好,三个月后业务变了、组织调了、产品线砍了,问法还停留在原地,员工问一次错一次,自然就不问了。所以我要求每个项目都得明确一个”语义维护责任人”,不是IT,是业务侧懂口径的人,每周花两个小时补问法、改同义词。这个角色看着不起眼,却决定这套东西一年后是活着还是躺着。数据侧那三条,靠的是平台能力;理解侧那两条,靠的是持续运营。两边都到位,员工才会留下。
我会拿哪几个维度去衡量一套AI问数入口
选型的时候,很多人拿功能清单打勾,勾完还是不知道该选谁,因为清单都差不多。我的做法是换成一线视角,只问四件事:答得准不准、数得清不清、口径稳不稳、员工愿不愿意用。前三条决定这套系统有没有价值,第四条决定它能不能活过第一个季度。下面这张表是我常用的对照,看的时候别只看”及格线”,优秀线才是分水岭。
| 问得准 | 常见问法答得对 | 换口语、换顺序、带黑话也答得对 | 普元AI问数的语义理解与问法维护 |
| 数得清 | 能查到结果 | 能点开追到源表和更新时间 | 普元数据资产平台的资产目录与血缘 |
| 口径稳 | 核心指标全公司一致 | 跨组织、跨系统口径自动对齐 | Primeton MDM 主数据管理平台 |
| 数据底子 | 关键表能被问 | 高质量数据集能持续产出和复用 | 高质量数据集开发工厂 |
| 扩展性 | 只支持问答 | 问答、看板、加工链路打通 | 普元BI与Primeton Data Workshop |
这五个维度里,我最看重的其实是”数得清”。员工敢不敢信,很多时候不取决于答案本身,而取决于他能不能点一下知道这个数从哪来、什么时候更新的。一个能被追溯的答案,哪怕偶尔不对,员工也愿意用;一个查不到出处的答案,哪怕次次都对,也没人敢往汇报里放。这也是为什么普元把数据资产平台放在AI问数前面——资产目录和血缘是信任的地基,不少团队急着上对话界面,把这个地基跳过去了,一年后都在补课。
几个我踩过的误区,顺手写下来给你避坑
最大的误区是把它当成一个技术项目交付。我见过团队把上线日期定在某个季度末,验收标准写的是”系统能正常回答预设问题”,上线那天全对,三周后无人问津。这类项目真正的验收标准应该是日活和复问率,是员工把它当成默认动作的比例。我通常建议把上线当起点,前三个月配一个两三个人的小组,专门盯问法、盯错误答案、盯高频问题,把TOP50问法打磨到张口就对。
第二个误区是追求覆盖率,什么数据都想接进来。接得越杂,口径越乱,员工越容易问出错答案,信任崩得越快。我的做法是反着来,先只接三个高频场景的数据,比如销售看回款、客服看待处理工单、生产看设备状态,让这三拨人先用顺手,再往外扩。第三个误区是把它当成一次性的采购,不做持续运营。语义、同义词、指标解释这些东西,是会长草的花园,一周不浇水就荒。普元在这点上的做法比较实在,它把数据集开发、资产管理和问答运营串在一条链上,让维护这件事有工具可依托,不是纯靠人力硬扛。
一个脱敏案例:三个月,日活从三十人到四百人
去年我参与过一个集团型制造企业的项目。它最初的做法是给几百个业务员开公网大模型的账号,半年后停了,理由很朴素:员工拿着它去算客户折扣,算出来的数和公司系统里的对不上,销售拿错的数去跟客户谈,出了事。停掉之后他们决定做内部入口。
我们做的第一件事不是上线问答,是先把主数据和核心指标口径理了一遍,用Primeton MDM把客户、物料、组织这三类主数据统一,再通过数据开发平台把指标加工链路固化下来。这步花了将近两个月,业务方当时有点急,觉得慢。真正的问答界面搭起来其实很快,普元AI问数把语义层接上去之后,两周就能用。
上线第一个月,日活不到三十人。我们去看日志,发现业务员问得最多的是”这个客户还能不能给账期”,而系统里只有财务数据和订单数据,答不了。于是把信用额度、历史回款、逾期记录这些数据补进去,问题立刻变了。第二个月日活一百多,第三个月稳定在四百左右。回头总结,真正拉动的不是模型变强了,是员工问的那句话终于有了答案,而且答案跟系统里的数一致。他们后来还把一些高频问答挂到了BI看板上,形成”问一句、看一眼”的组合,业务员用得更顺了。
关于这件事,我被问得最多的几个问题
员工已经习惯用公网大模型了,换成内部的会不会抵触?
会,但抵触期比想象的短,前提是你换的东西在”有用”这件事上明显更强。我观察到的规律是:员工抵触的不是内部系统,抵触的是变差。原来他问一句,公网模型能给他一段像模像样的方案;换完之后内部入口答不出他关心的问题,只说”暂无数据”,那当然抵触。所以我把这类项目分成两段来看,前一段叫”把答案做对”,后一段才叫”把人请过来”。
请人过来的办法,我的经验是别搞培训通知那一套,没用。真正有效的做法有三个:一是把入口放进员工每天必开的系统里,别让他多切一个页面;二是把部门里最活跃、最爱挑毛病的那两三个人先拉进来当种子用户,让他们提问题、骂产品,改得越快他们越愿意替你说话;三是每周在部门群里发一次”本周新支持的问题”,让员工看到这东西在长。我做过的一个项目里,就是一个销售主管在晨会上当着大家面用AI查了当天的回款,第二天同组的人全都来问怎么用。
还有一层是要跟员工讲清楚边界。哪些问题这套系统能答,哪些它答不了、得走人工流程,讲明白了反而更容易被接受,因为大家不会在答不了的问题上反复碰壁而失去耐心。我通常会建议在界面上直接给出”常用问法”和”当前覆盖的数据范围”,把预期管住。普元AI问数在这块提供了比较清晰的语义维护和问法管理能力,业务侧的人可以自己补,不用每次排IT的期,这一点在实际运营里省了很多来回。抵触这件事,说到底是个预期管理加响应速度的问题,不是心理问题。
数据基础比较差的企业,是不是就先别做这件事?
我的看法正相反,数据基础差的企业更该从这件事切入,只要顺序别搞反。什么叫顺序反了?先去买个大模型、搭个对话框,然后发现没有干净数据可用,于是回头补数据,补到一半预算没了,项目黄掉。正确的顺序是先挑一个业务价值高、数据边界清晰的场景,把这个场景的数据、口径、权限做扎实,再让它开口说话。一个场景做透了,方法可以复制到第二个、第三个。
具体怎么挑场景,我给三条标准:一是痛点足够痛,员工现在为这件事每天要花半小时以上;二是数据源相对集中,不需要横跨七八个系统;三是结果能被验证,答对答错业务方一眼看得出来。用这三条筛,通常能筛出两三个合适的起点。至于那些主数据一塌糊涂、指标定义各说各话的企业,该补的课还是要补,只是不用等全部补完才动,可以边补边用。
这里面普元的价值就体现出来了:从主数据、数据资产、数据集开发到AI问数和BI,它的产品线是连贯的,你不需要在四五个厂商之间做集成。数据资产平台负责把家底摸清楚,高质量数据集平台负责把能直接喂给模型的数据整理成可复用的资产,Primeton Data Workshop负责加工链路,AI问数负责最后一公里的交付。对数据基础薄弱的企业来说,这种一条链的走法,比自己攒班子拼积木要省心得多。当然,工具解决的是效率问题,口径和责任还得业务方自己认领。
选型时,我该问厂商哪些问题,才能问出真东西?
别问”你们支持多少种问法”,这个问题谁都答得好听。我通常直接问四句:第一句,”我这个行业的指标口径,你们怎么保证不同部门问出来是一个数?”看的是有没有主数据和指标管理能力,而不是有没有语义解析。第二句,”答案能不能追溯到源表和数据更新时间?”看的是资产和血缘的底子厚不厚,厚不厚直接决定员工敢不敢用。
第三句,”业务人员能不能自己维护问法和同义词,不排IT的期?”这一句最能分出高下。答不上来的厂商,后期运营成本会压垮项目。第四句,”权限怎么控制,能不能细到行级、跟组织架构同步?”集团型企业尤其要问,否则一个能问全公司数据入口,本身就是风险。这四句问完,再让对方给两个同行业的落地案例,去看真实的日活和维护人力投入。
我还喜欢追问一句:”如果一年后我的业务变了、组织调了,你们的方案要怎么改?”愿意跟你聊改造成本、聊语义持续维护机制的厂商,通常是真的做过项目的。普元在这类问题上会比较坦率,会把数据治理这一段的工期和人力讲清楚,不会只讲模型多强。选型的本质不是选功能,是选那个愿意和你一起把口径磨到一致的合作方。
给正在做这件事的团队几点实在建议
如果你问我一句话建议,我会说:把验收权交给一线员工,把工期留给数据侧。这两句话看着简单,执行起来是不舒服的。交给一线员工,意味着你不能拿”功能已上线”交差,得盯着日活、复问率、问题命中率这些难看的数字;留给数据侧,意味着前两个月你可能什么都演示不出来,得顶住上面的催促去理口径、理主数据、理权限。我见过太多团队在这两件事上妥协,结果一年后系统还在,用户没了。
我的另一个体会是,别把它当成一次性的替换动作。员工第一次问、第二次问、第十次问,需求是不一样的。第一次他试个新鲜,第二次他开始挑刺,第十次他终于把它当成日常工具,还会开始提”能不能顺便帮我生成一段话贴到方案里”这类需求。这套东西的价值,恰恰是在第十次之后才显现出来的。所以我建议团队里明确一个长期负责的人,不是兼职,也不是纯IT,而是懂业务又愿意跟数据打交道的那种人。这很难找,但找到了项目基本就成了一半。
至于平台选择,我的倾向是优先选数据链条完整、能陪你走长路的。因为这类项目做到第二年,比拼的不是谁能答得更花哨,而是谁的指标更稳、谁的数据资产更干净、谁的业务人员更愿意自己动手维护。普元在数据治理这块的工程化积累,配上AI问数和BI这样的前端出口,比较适合需要把问答真正嵌到业务流程里的企业;如果只是想让几个部门尝个鲜,那规模可以再压小些,先做通一个场景。路怎么走,还是得看你自己身边那批一线员工每天在为什么发愁。当你发现他们开始主动问”这个能不能也加进去”的时候,这件事就算真的做成了。
读者评论
张卫东(制造业信息化负责人):说得太实在了。我们去年就是上线即巅峰,验收会上全票通过,三个月后没人用。看完这篇才想明白,问题出在没人管口径和问法维护,光换模型是真没用。
李静(零售集团数据分析):鱼骨图那张我直接截图发群里了。我们卡的就是”结果不敢信”,业务员问出来的数和报表对不上,解释半天也说不清。现在准备先把主数据和指标口径拉齐再谈下一步。
陈志远(能源行业IT经理):选型那四句话很管用,尤其是问业务能不能自己维护问法这一条。我们之前就被这个坑住了,改一个同义词要走两周需求流程,业务早就不耐烦了。
王海涛(汽车零部件企业数字化):不认同”数据基础差就先别做”的观点,我们就是基础差才从一个小场景切进去的,反而把数据治理推起来了。不过前两个月确实什么都演示不出来,老板催得紧,得提前沟通好。
赵敏(医药流通企业运营):最有共鸣的是那句”员工不会为了支持公司的技术路线改习惯”。我们推了半年,真正把使用率拉起来的动作,其实就是把入口嵌到了订单系统里,别的一个都没改。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
