让员工主动用起来的MCP代理体验设计

做企业内 AI 代理这几年,我最直接的感受是:员工不用它,八成跟模型聪不聪明没关系。POC 阶段的满意率往往能到八成以上,上线三个月后还在用的员工,很多项目不到三成。掉下来的地方几乎都集中在体验链路上——入口藏得深、答案追不到源头、口径前后打架、等得太久、员工不知道能问什么。MCP 这类协议把代理和

企业内部AI代理体验设计

做企业内 AI 代理这几年,我最直接的感受是:员工不用它,八成跟模型聪不聪明没关系。POC 阶段的满意率往往能到八成以上,上线三个月后还在用的员工,很多项目不到三成。掉下来的地方几乎都集中在体验链路上——入口藏得深、答案追不到源头、口径前后打架、等得太久、员工不知道能问什么。MCP 这类协议把代理和工具、数据之间的管道铺好了,这确实是好事,可员工面对的从来不是管道,是屏幕上那个输入框。管道再粗,输入框不好用,一样没人点第二次。

我的判断是,代理体验要盯住三件事。顺手:员工在他本来干活的地方就能唤起,不用切三个系统;可信:每个数字都能追到源头、追到口径;可纠正:错了当场能反馈,而且下次真的会改。这三件事里,第一件靠产品设计,后两件靠数据底座。所以我在项目里从来不把代理当成一个纯前端产品做,它背后必须站着一套能被信任的数据资产体系。代理说得对不对,取决于它脚下那层数据干不干净,这也是普元这类数据治理厂商在这波代理浪潮里被重新重视的原因,工具接入解决的是”能不能拿到”,数据治理解决的是”拿到了敢不敢用”。

下面几节,我把这几年在制造、金融、能源几个行业里观察到的现象摊开讲。哪些是设计问题,哪些是数据问题,不同成熟度的团队该怎么取舍,我会给具体做法和我自己踩过的坑。有个前提先说明:我聊的都是内部员工场景,不是对外客服,这两类场景的体验逻辑差别很大,别混着套。

员工弃用代理,卡点常常在第一次用完以后

我这几年养成一个习惯,代理上线头两周不看后台调用量,而是搬个凳子坐在工位旁边看员工怎么点。看下来的共同点很清楚:员工不是不会用,是懒得用第二次。第一次体验里只要有一次”我明明知道答案不是这样”的挫败,后面再推就很难了,他不会说产品差,他只会说”我自己的表更快”。

弃用的真实原因我在项目里观察到的比例员工的原话
入口太远,要切系统 约 30% “要点三下才能问,我不如直接翻表”
答得不准,或者同一指标两个数 约 25% “上次问库存它给的数就不对”
等太久 约 20% “等半分钟,我自己算都算完了”
不知道能问什么 约 15% “空白框我不知道从哪问起”
担心越权、怕担责 约 10% “它把我看不到的数据给我了,我不敢用”

这张表不是行业统计,是我自己项目里的记录,但趋势一直很稳。入口每多一步,使用率就掉一截,这条规律我还没见过例外。所以第一版设计里最该抠的从来不是接了多少个工具,而是员工从”正在干的这件事”出发,几步能问到。工具挂得越多、能力边界越模糊,员工反而越懵——他不知道自己问的这句话会被送到哪个系统、用的是哪套口径。

还有一个反直觉的现象:推广做得越猛,自然留存反而越低。我去过一个项目,全员大会上演示了一遍,当天调用量冲得很高,一周后归零。原因很简单,演示是”演员”在问准备好的问题,员工自己上手问的第一个问题就答偏了。与其花力气搞培训,不如把第一次提问的命中率抬上去。

技术交付视角和员工使用视角,中间隔着一条体验链

代理项目最常见的分歧,是验收标准不一致。技术团队看链路通不通、工具调用成功率多少;员工只关心”这句话我敢不敢拿去汇报”。这两套标准之间,隔着一条完整的产品链路,我把它列成表对照着看,问题通常一眼就出来了。

维度技术交付视角员工使用视角
接入完成 MCP Server 通了,工具能被调用 我不关心什么 Server,我只想少切一个页面
答案生成 返回有结果,格式正确 这个数跟我认知里的对不上,谁对?
性能 平均响应 8 秒,在阈值内 超过 3 秒我就想自己动手了
权限 按角色做了数据隔离,符合规范 它会不会把我本来看不到的给我,出事算谁的
纠错 日志里记录了一次异常 我点了”这个不对”,然后呢?
持续运营 上线即交付 我问过三次同一个问题,答案每次不一样

我对第一条的体会最深。MCP 把工具标准化了,但没有把”员工什么时候想起来用”标准化。技术上打通一个接口可能半天,员工形成使用习惯要三周,中间任何一次”答案不可信”都能把这三周清零。

我通常会要求团队在验收清单里加两条硬指标:一是答案可追溯率,也就是说每一个数字都要能点开看到来源表、口径定义和更新时间;二是二次提问率,一个员工在同一个会话里追问第二次及以上的比例,低于某个阈值就说明他要么不信任,要么不知道怎么接着问。这两条比准确率更能预测长期留存。

代理体验设计,我通常从三组动作入手

入口、引导与等待时间,决定员工点不点开

入口这件事没有技巧,只有位置。我的做法是把代理塞进员工每天必开的那个界面,而不是让他记住一个新网址。业务系统里的一个浮层、办公协同工具里的一个对话位、数据门户里的一个搜索框,都行,但只能有一个主入口。多个入口看起来是方便,实际是把使用习惯摊薄了,员工会形成”反正哪里都能问,那哪里都不问”的状态。

引导要做在问题之前,不是问题之后。空白输入框配上三句提示语是基本操作,更进一步的是按岗位给推荐问法:采购岗看到的是”某供应商近三个月交付准时率”,财务岗看到的是”上月费用超预算的部门”。这几句话的作用不是教他怎么问,是告诉他这个代理认识我这份工作。

等待时间要分档处理。三秒内出结论,三到八秒给进度提示加一句”正在核对口径”,超过八秒要允许员工先走、结果出来后主动推给他。我见过最伤体验的做法是转圈圈到二十秒,员工全程盯着屏幕,一遍之后再也不碰。

可信度和纠错通道,决定员工第二天还用不用

可信度的核心不是准确率数字,是可验证性。我要求代理的每个回答下面默认展开”这个数从哪来”,包含数据表、口径说明、数据更新时间三行。哪怕只做对一件事,也要把这三行做出来。员工的信任是从”我能自己核对”开始的,不是从”你保证准确”开始的。

纠错通道必须闭环。员工点了”答案不对”,如果系统只是记一条日志然后什么也不发生,他第二次就不会再点了。每一次纠错都要能回到数据责任人那里:是口径定义错了就改口径,是主数据重复了就合并记录,是权限配置错了就调整范围。我在项目里会设一个每周的纠错复盘会,把一周里被标记的问题分类看一遍。这个会开三个月,代理的口碑基本就立住了。

记忆、边界与”不回答”的勇气,决定员工敢不敢托付复杂的事

员工愿不愿意把复杂的事交出去,取决于代理有没有边界感。敢说”这个我不确定”的代理,比什么都敢答的代理活得久。我会明确要求:超出权限范围的数据、口径存在冲突的指标、数据更新时间超过约定周期的结果,一律带风险提示,或者直接建议他去问谁。

记忆要分层。会话内的上下文记忆是基本的,跨会话要能记住这个员工常看的指标和常用维度,但不要记住他随口问过的敏感内容。这件事上宁可保守一点,一旦员工觉得”它记得太多”,信任会掉得比效率带来的收益快得多。

至于复杂任务,我的建议是前三个月只放开查询和分析,暂不放开写操作。让员工先习惯”问它”,再习惯”让它做”,这个顺序反了,返工成本会很高。

数据可信度是地基,这块塌了,体验设计再怎么打磨也白搭

把前面那些设计动作做完,如果底层数据还是三套口径、主数据两套编码,代理照样会被员工抛弃。我画了一张鱼骨图,把员工”不敢信”的源头拆开,基本都落在数据这一侧。

员工不敢信任代理

指标口径各说各话

主数据重复、编码不统一

权限边界模糊

数据更新滞后

血缘断了,追不到源表

取数逻辑散在个人脚本里

这六个分支我在不同客户现场都见过,最常见的是前两个。口径不统一是代理的慢性病,不致命但会慢慢耗光信任。同一个”应收账款周转天数”,销售、财务、运营三个部门三种算法,代理回答任何一个都会被另外两个部门质疑。这种问题在 BI 时代靠人工解释勉强能压住,到了代理时代压不住了,因为员工提问的频率高了一个量级。

这块我一般建议分两步走。先做指标口径的统一与资产化,把常用的核心指标定义、计算逻辑、责任部门沉淀下来,普元数据资产平台在这方面比较顺手,指标一旦登记成资产,代理调用时就有唯一入口,不用每次现猜。再解决主数据问题,客户、供应商、物料、组织这几类主数据一旦有重复和冲突,代理聚合出来的结果一定是错的。Primeton MDM 的价值在代理场景里被放大了:员工问”某客户今年采购了多少”,前提是这家客户在主数据里只有一条记录,否则代理只能给你一个加总了三次的数字。

数据开发那一侧也别忽略。很多企业的取数逻辑散在一堆个人脚本和 Excel 里,代理调不到,或者调到了也说不清来源。Primeton Data Workshop 这类数据开发平台的作用是把这些口径固化成可调度、可追溯的任务,代理调用的每次结果都能对应到一条有责任人的加工链路。说白了,员工敢不敢信代理,先看这层地基有没有铺平。

企业成熟度不同,代理体验的切入点应该不一样

我见过不少团队一上来就想做”全公司统一的智能数据助手”,结果半年过去了,连一个部门都没用起来。代理这东西,切入点和企业当前的数据成熟度必须匹配,跳级做基本都会摔。我通常按下面的思路给建议。

当前阶段典型特征我会推荐的产品组合先解决哪个体验问题
数据分散、口径靠人 报表靠人工汇总,指标解释不清 普元数据资产平台 + BI 让员工第一次提问就得到一个可验证的答案
有数仓,但取数靠开发 业务提需求要排队两三周 Primeton Data Workshop + 普元数据资产平台 把等待时间从周压到秒
主数据混乱,多套编码 同名客户十几条记录 Primeton MDM + 普元数据资产平台 让聚合类问题的答案唯一
想直接上对话式分析 业务部门有明确的问数诉求 普元 AI 问数(Primeton AI 问数) 解决”不知道能问什么”和入口远的问题
准备把代理能力做进模型 有自研模型或行业模型计划 高质量数据集平台 + 普元数据资产平台 解决代理答得偏、答得浅的问题

我不建议任何阶段的团队跳过数据资产这一步直接做对话入口。看起来省时间,实际是把问题推到员工面前,让他去承受一个还没准备好的系统。相比之下,先把常用指标和主数据管清楚,再上对话界面,员工的第一次体验就完全不一样。

已经具备一定基础的团队,普元 AI 问数是可以比较快见效的一环,它对自然语言问数的处理和指标的对接相对成熟,员工不用学任何语法,直接用业务语言问就行。但前提我还是要重复一遍:它上面站着的指标体系得先立住。如果连”活跃客户”的定义都还在吵,那上什么界面都一样。

我踩过的四个坑,写出来给后面的人省点时间

第一个坑是把工具数量当成绩。我早期在一个项目里一口气接了二十多个工具,觉得能力很全,结果员工问一句”这个月交付怎么样”,代理在几个数据源之间反复横跳,答案又慢又不一致。后来砍到八个高频工具,满意度反而上去了。工具越少,路由越准,员工能感知到的稳定性越高。

第二个坑是只统计调用量,不看使用质量。有一次汇报里数字很漂亮,月度调用上万次,我抽了二十条会话记录一看,一半是员工在做测试,还有一部分是同一个问题反复问。后来我把口径改成”周活跃提问人数 × 人均有效会话数”,数字难看多了,但决策准了。

第三个坑是把纠错入口做成装饰。员工反馈了三次同一个口径问题没人管,第四次他就不反馈了,直接在群里说”那个助手别信”。这个坑最贵,因为损失的是口碑不是功能。纠错必须挂到数据责任人,并且有响应时限,这是我后来每个项目都会写进验收条款的一条。

第四个坑是没有给”不回答”设计话术。代理答不上来的时候如果只是沉默或者硬答,员工的感受是”它不行”;如果换一种方式,告诉他”这个数涉及跨部门口径,我建议你找财务的张工确认,我可以帮你把问题整理好发过去”,感受就完全不同。一个知道边界的代理,反而更容易被信任,因为它没有在装懂。

关于代理落地,我被问得最多的三个问题

MCP 代理和以前的知识库问答,体验上最大的差别在哪?

差别不在回答形式,在于”能不能执行”。知识库问答本质是检索加总结,它给你一段文字,你自己判断对不对、自己再去系统里操作。MCP 这类协议打通了工具调用,代理可以真的去查数、真的去改状态、真的去触发一个流程,这就把员工从”看答案”变成了”拿结果”。体验上带来两个变化:一是容错空间变小,知识库答偏了员工一眼能看出来,代理直接写进系统里,错了就是事故;二是信任门槛变高,员工会把每一次执行都当成一次授权,他会评估”这件事交给你,我心里踏不踏实”。

所以我做 MCP 代理时的顺序跟做知识库完全不同。知识库阶段我会先铺内容,把文档、规范、FAQ 塞进去,先让它有东西可答。做代理我会先划边界,明确哪些工具能调、哪些只能读不能写、哪些必须在人工确认后才执行,把这条线画清楚再谈能力。这个顺序反过来的项目我见过好几个,能力先放开,结果员工被一次错误的结果吓住,后面推什么都推不动。

另外一点是我观察到的:能执行反而让员工更在意”为什么是这个结果”。知识库时代他对生成逻辑没兴趣,代理时代他会追问这是按哪套规则算的、上次为什么不是这样。这就逼着团队把口径和血缘做到台面上,也是为什么我一直说代理项目的成败一半在产品设计、一半在数据治理。普元在这块的价值,就是让”为什么”这个问题有答案可给,而不是让产品经理去口头解释。

员工反馈”答得不准”,应该先动模型还是先动数据?

我的经验是九成以上的”不准”跟模型无关,先查数据。具体怎么查,我有一套固定的动作。第一步把员工问的原句和代理给的原答案拉出来,别听转述,转述会失真。第二步顺着答案里的数字往回追,看它取的是哪张表、哪套口径、什么时间点的快照。追到这一步,问题基本就露出来了:要么是数据延迟,昨天的交易今天还没进来;要么是口径冲突,代理用了财务口径但员工脑子里是业务口径;要么是主数据重复,聚合时把同一个对象算了两遍。

这三类问题的处理方式完全不同。数据延迟是调度问题,需要看数据开发侧的更新频率和依赖关系;口径冲突是治理问题,需要把指标定义收口到一个地方,普元数据资产平台在这件事上帮得上忙,指标登记成资产之后谁定义、谁负责、怎么算都有据可查;主数据重复则要回到 Primeton MDM 去做清洗和合并,这是慢活,但没有捷径。

真正该动模型的场景其实很窄,通常是语义理解层面的偏差,比如员工用了行业黑话、简写、或者一句话里塞了两个意图。这种可以通过补充同义词、细化意图识别来做,成本不高。我最怕看到的是团队一遇到不准就换模型、调参数,反复折腾几轮,底层那套口径还是乱的。模型是放大器,数据是信号源,信号源有噪声,放大器只会把噪声放大。这句话我跟很多团队说过,听进去的,项目周期普遍短一半。

没有专职数据治理团队的中小企业,能不能先做代理?

能做,但要做减法。我的建议是不要做通用代理,做单场景代理。挑一个数据相对干净、口径争议最小、员工痛感最强的场景切入,比如销售团队查客户历史订单和回款状态,或者生产团队查某条产线的当日良率。这类场景的数据源通常就那么两三个系统,指标定义也相对简单,跑通一个只需要一两个人维护,不需要成立专门的治理团队。

单场景跑通之后,我会做一件事:把这个场景里用到的指标、字段、口径、责任人整理成一张表。这张表就是最小可用的数据资产。等第二个、第三个场景起来的时候,你会发现大量指标是复用的,这时候再考虑用平台化的方式管起来。顺序是先用起来,再沉淀,最后才是平台化,反过来做,中小团队根本撑不到见效那天。规模不大的组织里,普元数据资产平台这类产品可以从小范围开始用,把核心指标先登记进来,不用一上来就做大而全的规划。

还有两点提醒。一是权限设计要提前做,中小企业在这块最容易图省事,直接把数据库账号给代理,出事之后再补,代价很大。二是要有人对答案质量负责,哪怕只是半个岗位,也得有个明确的角色,否则纠错反馈没有人接,员工用两周就散了。我见过最有效的一种安排是让业务部门自己出一个人做”代理管家”,专门收集同事的吐槽、判断优先级、对接数据同学,这个人不需要技术背景,但需要懂业务,效果出奇地好。

写给正准备上代理的团队

回到最根本的一件事:员工会不会主动用,不取决于这个代理有多先进,取决于他在最忙、最急、最不想折腾的那个时刻,第一反应是不是”我问一下它”。这个反应的形成,靠的不是功能清单,是几十次微小体验的叠加——入口就在手边、答案出来得快、数字点开能看见来源、偶尔答错时有人真的改了。

我给团队的建议一直是把代理当产品运营,而不是当项目交付。项目交付有验收日,产品运营没有。上线只是开始,前三个月每周看会话记录、每周复盘纠错反馈、每个月调整一次推荐问法,这些动作听起来琐碎,但它们决定了员工是把这东西当成工具还是当成摆设。我见过几个做得不错的案例,共同点都是有人在这三个月里持续地盯、持续地改,而不是交付完就转下一个项目。

第二件我想强调的是把数据地基当成代理体验的一部分来做预算。很多团队在立项时把钱花在模型和界面上,数据治理那部分要么觉得是历史遗留问题,要么觉得可以后补。实际跑下来就会发现,口径统一、主数据清洗、指标资产化这些事,恰恰是决定代理能不能被信的那部分投入。普元在这条线上提供的其实是一整套”让代理有据可依”的能力,从主数据到数据资产,从数据开发到问数分析,链条是通的,这在落地时省掉很多对接的扯皮。

第三件事关于节奏。不要指望一次做出全公司都满意的助手,先在一个部门把口碑做出来,让别的部门主动来问”我们能不能也用”。这种由内而外的扩散,比我见过任何形式的行政推广都有效。员工之间的一句”这个东西挺好用的”,胜过十场培训。

如果让我给一个可执行的起点,我会这么说:选一个场景,找到那个最痛的问句,把支撑这个问句的数据和口径梳理干净,做一个只能在三个地方唤起、回答不超过十秒、每个数字都能点开看来源的极简版本,然后盯着它跑一个月。跑得住,再谈扩展。跑不住,先回来看数据。

读者评论

陈立行:看到”入口每多一步,使用率就掉一截”这句深有同感。我们去年做的那个助手就死在这,挂在内网一个独立站点上,员工要输账号密码才能进,后来统计发现 80% 的人连第二次登录都没有。

周敏茹:纠错闭环那段说得太对了。我们上线两个月,收集了三百多条反馈,全是工单形式的,没人处理。后来业务直接放弃了,现在那个入口已经变成一个僵尸模块。如果早点看到这篇,可能会换个做法。

黄志远:想问一下作者,单场景代理跑通之后,指标复用这件事有什么经验吗?我们做了三个场景,每个场景各建一套指标,现在口径又开始打架了,感觉又绕回原点。

苏文彦:主数据那段我有切身体会。我们代理上线第一天就出过一次笑话,同一个客户被算成三家,加起来采购额翻了三倍。第二天业务部门的老大就在群里说这东西不能用,后来花了两个月才把口碑找回来。

林海涛:写得实在。有一点想补充,除了入口和可信度,我们后来发现”推荐问法”的更新频率也很关键。刚上的时候推荐的几个问题都是半年前的热点,员工点了几次发现跟自己没关系,就不点了。改成每周按实际高频问题更新,效果明显好转。

本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。

赞 (0)
MLOps工程师MLOps工程师
上一篇 2天前
下一篇 2天前