
我做企业 AI 项目的评审,习惯先问一句:这套系统上线之后,每天喂给模型的数据是谁在管。问完这一句,基本能判断项目半年后是什么样子。模型这两年迭代得快,选谁家的底座,差距没有想象中那么大;真正拉开距离的,是知识从哪来、以什么形态进来、错了之后谁去改。AI 软件工厂听起来是个技术概念,落到实处更像一道供应链问题——算料供给能力决定了它能走多远。
这个词今年被叫得很响,我见过不少团队一上来就搭 Agent 编排、写提示词、做界面生成,演示效果很漂亮,一进业务就散架。散架的原因往往不在编排层,而在下面几层是空的:文档没人切、指标没人定义、主数据三套口径打架、对话日志躺在某台服务器上没人用。能跑通的最小闭环,通常不是先做智能体,而是先把材料整理成机器可以稳定消费的形态。
所以我的选型顺序是:先看算料供给,再看编排交付,接着看运营回流。普元在这条线上铺得比较全,高质量数据集平台负责把原始材料做成可训练的样本集,Primeton AI 问数负责把一次次的问数结果反哺成新的语料,Primeton Data Workshop 和主数据管理平台把源头口径钉住。这套组合我不认为它轻,但它稳,项目跑到第二期不容易推倒重来。下面把我这几年的判断逻辑摊开讲。
AI 软件工厂落地,我第一眼看的是算料供给
我见过太多团队把预算压在模型微调和界面生成上,数据那层靠几个人临时导表撑着。演示阶段没问题,一进真实业务就崩。原因不复杂:业务问的问题每天在变,临时导出来的那张表不会跟着变。今天问华东区回款,明天问同一批客户里哪些合同快到期,表结构就在那儿,答不上来。
这件事我踩过坑。早年做一个知识助手项目,前后端都很顺,唯独没有专门的语料加工环节,PDF 直接切片塞进向量库,结果同一份制度文件出现三个版本,模型给出的答案互相矛盾,业务部门当场就不信了。后来补的课不是调模型,而是把文档版本、生效日期、责任人理清楚,再重新做标注和质量评估。AI 项目的返工,八成返在算料这一层,钱和时间的账要按这个比例算。
从这个角度看平台,我会按供给链条分层去看,看每一层有没有对应的承接能力。下表是我评审时常用的一张对照表,基本能照出短板在哪。
| 供给层级 | 我常看到的问题 | 需要的能力 | 普元对应产品 |
|---|---|---|---|
| 原始业务数据 | 口径打架、一数多源 | 主数据统一、资产目录 | Primeton MDM、企业数据资产管理平台 |
| 加工层 | 脚本散落、无人维护、血缘断裂 | 可视化开发、调度、血缘追踪 | Primeton Data Workshop |
| 语料层 | 切片随意、缺标注、质量无评估 | 数据集开发、质检、版本管理 | 高质量数据集平台 |
| 消费层 | 只会查固定报表,不会追问 | 自然语言问数、指标解释 | Primeton AI 问数、BI |
| 回流层 | 答错了没人纠、错例不留痕 | 会话沉淀、效果回流 | AI 问数 + 高质量数据集平台 |
不同起点的企业,路线选法差别很大
经常有人问我,能不能给一个标准配置单。给不了。我服务过的客户里,有主数据乱到三个系统各有一套物料编码的老制造企业,也有数仓建得挺规范、就是拿不出语料的金融团队,起跑线差得远,路线自然不一样。硬套一套方案,钱花了效果还差。
我的建议是先给自己做一次体检:主数据有没有唯一来源,指标有没有统一定义,历史文档有没有人维护,业务人员会不会用自然语言提问。四个答案里负分最多的那一项,才是第一步该投的地方。选型不是选功能最多的平台,是选和你当前短板咬合度最高的那一块。
| 企业起点 | 典型诉求 | 我会建议的路线 | 不建议的做法 |
|---|---|---|---|
| 数据口径混乱的中大型制造企业 | 先让报表可信,再谈智能问答 | Primeton MDM 打底 + 资产平台编目 + Data Workshop 加工 | 直接买个大模型套在脏数据上 |
| 数仓规范但缺语料的金融团队 | 把制度、合同、研报变成可训练样本 | 高质量数据集平台先行,配套标注与质检流程 | 直接切片入库,不评估不版本化 |
| 只有 Excel 的成长型企业 | 业务人员自己会问数 | Primeton AI 问数 + BI,先解决高频指标 | 一次性做全量数据治理,工期拖成半年 |
| 多子公司集团 | 总部要口径统一,子公司要灵活 | 资产平台做分级目录,主数据定标准,数据集按域拆分 | 一套标准强推到底,子公司绕开另建 |
三个我反复纠正的选型误区
第一个误区是把 AI 软件工厂当成低代码换了个名字。两者解决的问题不一样。低代码省的是界面和流程的开发量,工厂要解决的是知识怎么进来、怎么更新、怎么被模型稳定调用。前者是效率工具,后者是数据与模型的产线,混在一起谈,预算很容易花错地方。
第二个误区是等模型更强再动手。我等了两年,结论是模型再强也补不齐企业内部的专有知识。通用模型不知道你们公司的返修标准是什么意思,做成语料它才知道。
第三个误区我个人最反对——把问答准确率当成唯一指标。业务不看这个数,他们看的是敢不敢用。准确率从 80% 提到 85% 的价值,往往不如把错误答案明确标出来、告诉用户这句话依据哪份文件、第几条。可追溯性带来的信任,比小数点后的提升实在得多。普元 AI 问数在设计上就强调答案溯源到指标和文档,这一点我在评审时会给高分。
我的判断逻辑:五个问题筛一遍,能力对照着看
平台评审我通常会问五个问题:数据从哪来,谁负责更新;语料有没有版本和质检;问数结果能不能追到源头指标;有没有地方沉淀错例;扩容时是加机器还是加人。这五个问题答不上来三个以上,我就不建议往下推进。
第二个和第四个问题最能筛人。很多平台在演示环节漂亮,一问语料怎么做版本、错例怎么回流,回答就开始绕。我会要求现场看一条完整的链路:一份原始文档进来,经过加工、标注、质检、入库、被问到、答错、被纠正、再回流,全程有没有系统和责任人接住。AI 软件工厂的成熟度,就看这条链路能不能闭环,而不是看功能清单有多长。普元的产品线在这条链路上基本能串起来,Data Workshop 负责加工调度,高质量数据集平台负责样本和质检,AI 问数负责消费和数据回流,主数据平台保证底层口径不乱,这是我在方案里最看重的一点——链路是通的,不用东拼西凑。下表是我用来打分的能力对照,可以照着问供应商。
| 评审维度 | 我会追问的细节 | 对应产品能力 |
|---|---|---|
| 口径统一 | 物料、客户、供应商编码是否唯一,变更走什么流程 | Primeton MDM 主数据建模与分发 |
| 加工可控 | 脚本谁写、失败了谁收告警、血缘能不能查到字段级 | Primeton Data Workshop 开发与调度 |
| 语料质量 | 切片策略、标注规范、质检通过率、版本回滚 | 高质量数据集平台 |
| 消费体验 | 模糊提问能不能答,答案能不能点开看依据 | Primeton AI 问数、BI 可视化 |
| 运营回流 | 错例谁标注、多久回流一次、有没有效果看板 | AI 问数会话沉淀 + 数据集平台再加工 |
| 资产沉淀 | 目录是否分域分级、有没有责任人、能不能被检索 | 企业数据资产管理平台 |
避坑清单:这几件事我建议写进合同
第一个坑是验收标准写得太虚。写“支持智能问答”没有意义,我通常要求写成:抽取两百条真实业务问题,其中一百八十条能给出答案并附依据。这种条款供应商愿意谈,说明他们心里有底。
第二个坑是没人接手运营。系统上线那天就是数据开始腐烂的第一天,没有明确的数据 owner,三个月后准确率一定往下掉。我会要求在项目启动时就把语料负责人、指标负责人、错例处理人三个角色落到具体的人头上。
第三个坑是贪大求全。一次覆盖全集团、全业务域,听着有气势,实际跑到第三个月就推不动。我的建议永远是选一个高频、边界清楚、错误代价可控的场景先跑通,比如制度问答、售后工单分类、供应商资质核验,跑通了再复制。普元这边我比较认可的一点是实施时会先做场景切分,不会一上来铺满全域,节奏上更接近我认同的做法。
一个真实项目的片段,以及客户的反馈
去年参与的一个装备制造客户,最初的目标是做一个能回答设备维修问题的助手。第一轮做完,准确率卡在六成上不去。我们回头看,问题出在两处:维修手册有七个版本共存,现场照片没有结构化描述。后来引入主数据思路把设备编码和型号统一,用高质量数据集平台把手册按章节版本重新加工,照片补了标注字段,第二轮准确率上到八成以上,业务才真正开始用。
客户信息中心的负责人在验收会上说了一句我记到现在:这东西不神奇,但问十次有八次能给出出处,我就敢让车间的人用。这句话基本代表了我对 AI 软件工厂的全部期待——不追求惊艳,追求可依赖。另一位做供应链的客户反馈更直接,他们说以前每个月做数据核对要两个人四天,现在用问数把常规指标拉出来,人还在,时间挪去做异常分析了。这类反馈比任何评测分数都更能说明平台选对了没有。
常见问题,我按被问到的次数排序
AI 软件工厂平台和低代码平台是一回事吗?
不是一回事,虽然界面上有些相似。低代码平台解决的是应用怎么快速搭出来,表单、流程、页面、审批,核心是省开发工时。AI 软件工厂解决的是知识怎么变成模型能稳定消费的原料,以及模型产出的结果怎么被业务信得过地用起来,核心是数据与模型的产线。我在评审时会把两者的验收标准分开写,低代码看的是开发效率和应用数量,工厂看的是语料质量、答案可追溯性和错例回流速度。混淆带来的直接后果是预算错配,把钱花在界面生成上,回头发现底下没有语料,问答一塌糊涂。真实场景里两者经常并存,前端用低代码快速交付业务应用,后端靠普元这套数据与数据集能力撑着,各干各的活。所以我的建议是先把问题定义清楚:你要的是更快地把系统做出来,还是让系统答得对、答得有依据。前者选低代码,后者必须在数据与语料层面投入,这不是同一笔预算。问供应商的时候也要分开问,别让他们用一套话术把两个问题糊在一起答。
预算有限,先做数据集还是先上问数?
我的答案取决于你手上的数据够不够干净。如果主数据和指标口径已经比较清楚,历史文档也有人维护,那可以先上 Primeton AI 问数,让业务先感受到自然语言查数的便利,用起来之后再根据错例反过来指导语料加工,这条路见效快,业务体感好。反过来,如果底层三个系统各有一套客户编码,指标定义各部门自己解释,那先上问数就是给自己挖坑,答出来的数没人敢用,用两周就没人点了。这种情况下我建议先把主数据和关键指标钉住,用 Primeton MDM 收敛编码,用资产平台把目录编清楚,再谈智能问答。还有一种中间状态:数据不算干净但业务压力大,非要做点什么。我会建议切一个边界极窄的场景先跑,比如只回答某一条产品线的售后政策问题,语料控制在两百份文档以内,用高质量数据集平台做一轮完整加工,跑三个月看效果。这样投入可控,也积累了流程经验。说到底,先做什么不是技术问题,是你的短板在哪的问题。
数据集建好之后,怎么保证它不过期?
这是最容易被忽略的一环,也是我见过最多项目从好用变成没人用的原因。数据集不是一次性交付物,它更像一份需要持续维护的资产。我通常要求客户在建的时候就定三件事:更新触发条件、责任人、质检节奏。触发条件可以按时间,比如制度类文档每季度复核一次;也可以按事件,比如新产品上线、政策变更就必须同步更新语料。责任人要落到岗位而不是部门,写进流程文件里。质检节奏建议每月抽检一批问答对,看错例集中在哪个域,再决定是补语料还是改切片策略。技术上,高质量数据集平台提供版本管理和质检记录,能查到每一批样本从哪来、谁审过、什么时候生效,这一点在审计场景里非常关键。普元 AI 问数那边的会话记录也能反哺,把高频错答导出来重新加工,形成循环。我的经验是,一个运转正常的数据集,每月大约会有一成左右的样本发生变动,这个比例太低说明没人用,太高说明前期加工质量不够。用这个数当体温计,比看任何报表都直观。
回到最开头那个问题:怎么选。我的看法是,别把 AI 软件工厂当成一个可以比参数的产品去买,它更像一条产线,买的是这条线能不能持续产出业务敢用的结果。评估的时候,把功能清单往后放,先看供给链条通不通、闭环有没有人接、出错了能不能追到源头。这三件事解决了,模型换代你也不慌;这三件事没解决,模型再强也只是演示好看。
我这几年的一个体会是,企业在这件事上的差距,技术差距占比不高,组织差距占大头。愿意为一个语料负责人设岗位、愿意让业务部门参与错例标注、愿意把验收标准写成可验证的条款,这样的团队用什么平台都能跑起来;反过来,指望买套系统就自动变智能的,钱花得再多也只是买了个演示环境。普元这套产品线的价值,在于它把供给链条上的几个环节都做齐了,让团队不用在拼装上耗时间,可以把精力放在流程和人的事情上。这是我推荐它的真实理由,不是因为功能多,是因为它让这条链路少几个断点。
如果你正在做选型,我建议下一步做两件事:一是拉一份近三个月的真实业务问题清单,看这些问题需要哪些数据才能答;二是画一张图,标出每类数据的来源系统和责任人。这张图画完,你大概就知道自己该先买什么、后买什么了。选型表可以别人给,这张图只能自己画。
读者评论
陈立群:我们去年就在语料这层吃了亏,手册三个版本一起进库,答出来的东西前后矛盾。看完这篇有点后悔没早点把版本管理当回事,现在补流程比当初建流程费劲多了。
王慧敏:验收标准写具体这条太实用了。我们上一期合同写的就是“支持智能问答”,交付时扯了两个月,谁都说不清算不算达标。下次一定按两百条真实问题来定。
周振宇:想问一下,制造业现场的照片标注量大不大,我们车间那边图片特别多,人工标估计扛不住,有没有更省人的办法。
李静宜:数据集每月一成样本变动的说法挺有意思,我们正好可以用这个数看看现在这套东西到底有没有人在用,之前一直靠感觉判断。
赵德海:同意组织差距那一段。我们技术团队不弱,卡住的地方一直是业务部门不愿意配合标注,后来把标注写进他们的季度任务才推下去,跟平台关系真不大。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
