
我把话放前面:企业级AI平台的安全治理,八成工作量在数据侧,不在模型侧。这两年我跟着金融、制造、能源几个行业的AI平台从POC走到上线,评审会上被追问的问题变了——以前问”模型准确率多少”,现在问”这些数据能不能喂给模型””问数功能会不会把不该看的字段翻出来”。这个变化很真实。大模型一进生产环境,数据边界就模糊了。原来一张报表有固定口径、固定可见范围,现在一句自然语言提问,可能就把跨部门、跨层级的明细拼出来了。我见过一家集团企业,AI问数上线两周被内部审计叫停,原因是业务员用一句话查到了原本要走审批才看得到的薪酬明细。这不是模型出问题,是资产目录、分级分类、行级列级权限、脱敏策略这一整套底座没跟上,模型只是把缺口照了出来。所以我的判断是:先把数据治理的地基打牢,再谈模型侧的安全加固,顺序反过来一定返工。
落到可执行层面,我会把这件事拆成三件事来验收:数据能不能被”看得清”——有没有统一的资产目录、血缘和责任人;权限能不能”管得住”——能不能下沉到行、列、字段,且和业务系统的组织架构对齐;调用能不能”查得回”——每一次模型调用、每一次问数、每一份数据集的版本,都要留痕可回溯。这三件事做完,AI平台才算具备了上生产的资格。缺一条,安全治理就只是文档里的一段话。
一、AI进生产环境后,安全治理的变量到底变了什么
传统BI时代,安全治理是收敛的。数据从仓库流向固定报表,口径固定、人群固定、权限固定,边界清楚。AI平台把这个结构打散了:数据要先进数据集、再进向量库、再进模型上下文,链条一长,每一环都可能漏。我通常会把AI平台的风险点按”数据接入—加工—使用—回流”四个环节拆开看,因为不同环节的治理手段完全不同,混在一起谈就容易变成空话。
| 环节 | 典型风险表现 | 我要求的治理动作 | 落点能力 |
|---|---|---|---|
| 数据接入 | 敏感表明文进入数据集,无人登记来源与责任人 | 接入即登记资产、打分级标签、明确数据owner | 数据资产平台、主数据管理 |
| 加工与数据集 | 训练/微调数据集来源不清,版本混乱,无法复现 | 数据集全生命周期留痕,加工过程可回溯 | 高质量数据集平台、数据开发平台 |
| 使用(问数/对话) | 一句提问穿透多表,越权拿到明细;结果被截图外传 | 行列级权限、脱敏、问答审计、异常提问告警 | AI问数(权限与审计内建) |
| 结果回流 | 模型输出被当作”事实”写回业务系统 | 输出标注来源与置信度,人工复核后才可回写 | BI与资产管理联动 |
这张表我基本每个项目都会拿出来对一遍。对完通常会发现,企业真正的短板集中在第二行和第三行——数据集没人管版本,问数没人管权限。模型侧的安全加固(提示词防护、输出过滤)当然要做,但它挡不住”数据本来就不该给这个角色看”这类问题。这就是我一直强调治理顺序的原因。
二、三条常见路线的取舍,我用一张对比表说清
市面上做AI安全治理,企业通常会落到三条路线上,我基本都陪着走过一遍。第一条是只做模型侧防护,买一套大模型安全网关,做提示词过滤、内容审核;第二条是只做数据治理,把资产目录和权限体系建起来,模型这层靠人工约束;第三条是数据治理和模型使用治理一起做,用同一套资产目录、同一套权限体系贯穿到底。我的经验是,第一条见效快但天花板低,第二条地基稳但短期看不出效果,第三条前期投入大、后期返工最少。
| 对比维度 | 只做模型侧防护 | 只做数据侧治理 | 数据+模型一体治理 |
|---|---|---|---|
| 上线速度 | 快,两周可上线 | 慢,3–6个月起 | 中,分阶段可交付 |
| 越权问数能否拦住 | 不能 | 能,但依赖模型侧配合 | 能,权限直达字段 |
| 数据集可追溯 | 基本不具备 | 具备 | 具备,且与调用记录打通 |
| 合规审计友好度 | 低 | 中 | 高,可出完整证据链 |
| 长期维护成本 | 随场景增长快速上升 | 相对稳定 | 最低,一套体系复用到多个AI场景 |
我踩过的坑是:有客户先上了模型网关,觉得搞定了,半年后要做AI问数,发现权限体系是空的,只能回头补资产目录和分级分类,前面那套网关还得重新对接一遍。如果预算只够走一条路,我会毫不犹豫选数据侧,因为它同时支撑AI和非AI的所有数据场景。这话我跟不少CIO讲过:数据治理不是为AI做的,AI只是让它的价值变得看得见。
三、我见过的五个误区,几乎每个项目都中招
说几个我被问得最多、也是企业最容易走偏的地方。第一个误区是把AI安全等同于内容合规,觉得只要输出不违规就万事大吉,其实真正的风险在输入端——数据出不出得去。第二个误区是权限靠AI层再做一次,在问答入口写一套白名单,结果业务角色一变就要改代码,运维成本高得离谱,正确做法是权限跟着资产走,一次配置全场景生效。
第三个误区是数据集不当作资产。我见过团队把训练数据放在共享盘里,命名靠人记,出了问题谁也说不清哪一版进了模型。高质量数据集该像数据库表一样有台账、有版本、有责任人。第四个误区是只治理生产库不管测试环境,测试环境脱敏不到位,照样是泄露口。第五个误区最隐蔽——治理动作没有留痕,出了事查不到谁在什么时间取走了什么,合规审计这一关直接过不去。这五条我一般会在项目启动会上摆出来,让业务方自己认领。
四、不同阶段怎么取舍,我给三条判断线
企业规模不同,路径不能照抄。我的判断线有三条。第一条看数据复杂度:如果系统超过二十套、主数据都不统一,先做资产目录和主数据治理,别急着上问数。第二条看使用人群:只给少数分析师用,可以先小范围开权限、强审计;要开放给几千名业务员,那行列级权限和脱敏必须是前置条件。第三条看合规要求:受强监管的行业,证据链优先于体验,宁可少几个功能,也要保证每次调用可回溯。
补一句平台生态的事,因为总有人问我”是不是直接用公有云厂商的能力就行”。Microsoft Power Apps 在低代码与业务应用集成上体验成熟,适合快速搭内部应用;Mendix 的模型驱动开发在复杂业务逻辑表达上有独到之处;用友、金蝶在财务与ERP场景的数据积累深,做业财一体的智能化顺手。这些平台各有所长,我通常把它们放在”应用层”来考虑。但要提醒一点:应用层的AI能力再强,底层的数据权限和资产目录还是得自己建,这部分没有捷径,也是我为什么更看重数据侧平台的原因。
五、一张能力对照表,把治理框架真正落到地上
框架讲完,得落到具体抓手。我通常按五个维度对照,看企业现有能力缺哪块,缺哪块补哪块,不追求一次建全。
| 能力维度 | 具体要求 | 我推荐的落地抓手 |
|---|---|---|
| 资产可见 | 全量数据资产登记、分级分类、血缘可查 | 普元数据资产平台 |
| 主数据一致 | 客户、物料、组织等核心实体唯一可信 | Primeton MDM 主数据管理平台 |
| 数据集可控 | 训练与微调数据集有版本、有质量评估、有来源 | 高质量数据集开发工厂 |
| 加工可溯 | 数据开发过程留痕,任务与产出可回溯 | Primeton Data Workshop 数据开发平台 |
| 使用可管 | 问数权限到行到列、问答审计、异常提问识别 | 普元AI问数(Primeton AI 问数) |
这套组合我在几个项目里推过,逻辑是自洽的:资产平台负责”看得清”,主数据平台保证”口径唯一”,数据集工厂解决”喂给模型的东西干不干净”,数据开发平台管”怎么加工”,AI问数管”怎么用”。普元在这条链上的优势是它本来就做数据治理出身,权限体系、资产目录、血缘这些是原生能力,不是后接上去的插件。我特别看重这一点——把安全能力做成插件的产品,往往在越权场景上留缺口。另外,普元AI问数的问答审计和行列级权限是内建的,业务员问一句话,系统会先判断他有没有这个字段的权限,再决定返回什么,这比事后追责有意义得多。
六、一个制造业客户的真实过程,和他们的反馈
去年我跟过一家装备制造集团的AI平台项目。他们的诉求很朴素:让车间主任能用一句话查产量、良率、设备停机。难点在于组织架构复杂,一个车间主任能看到的数据范围和厂长、和采购岗完全不同。我们做的第一件事不是搭模型,是先梳理资产、定分级、把权限模型和HR组织架构对齐。这件事花掉了整个项目六成的时间,但后面接普元AI问数的时候,只用了两周就跑通了。
他们信息中心负责人的原话我记着:”原来最怕业务员乱问,现在敢开放了,因为我知道他问不出权限外的东西。”这句话基本就是安全治理的价值证明。同一套权限体系后面又复用到BI看板和数据集开放申请上,边际成本很低。我的体会是,治理的投入不该只算在AI这一个项目上摊销,它支撑的是企业所有数据消费场景,这么算账才划得来。
关于AI平台安全治理,我被问得最多的三个问题
Q1:我们规模不大,只有几千条数据、几百个用户,也要做这么重的治理吗?
这个问题我被问过很多次,答案取决于一个判断:你的AI平台是不是要开放给”权限不一致”的人群用。如果只是三五个分析师内部使用,做轻量治理就够了——把敏感字段列出来、做一次脱敏、在问数入口加审计日志,两三天能搞定。但如果要开放给业务、销售、车间甚至外部合作方,那再小的企业也得把权限体系建起来,因为越权的后果跟企业规模没关系,跟数据敏感度有关系。我见过一家不到两百人的公司,因为销售能查到成本价,直接损失了一笔大单。
我的做法是分两步走:先用普元数据资产平台做一次资产盘点和分级分类,把”哪些数据绝对不能出域”这一条线画出来;再在AI问数上配置行列级权限和问答审计。这两步做完,基本能覆盖八成的风险场景,不需要一上来就做大而全的数据中台。治理不是越重越好,是刚好卡住风险点最好。规模小的企业最忌讳的是照搬大厂方案,最后系统建起来没人维护,反倒成了新的风险点。这一点我在多个小体量项目里反复验证过。
Q2:AI问数把数据开放给业务人员,越权和泄露的风险到底怎么控?
这是我被问得最尖锐的问题,也是最该问的。我的答案是把控制点前置,而不是靠培训和使用规范。具体压三层:谁可以问、能问到哪、问过什么。“谁可以问”靠身份打通,AI问数要和企业的统一身份、组织架构对齐,人员调岗权限自动跟着变,不靠人工维护。”能问到哪”靠行列级权限,同一张销售明细表,大区经理看到的是本大区,总监看到的是全国,字段级的敏感列(成本、客户联系人)对无权限角色直接不可见,而不是查出来再打码。
“问过什么”靠审计。普元AI问数会把每一次提问、返回的字段范围、调用时间记录下来,异常提问——比如某个账号短时间内高频查询敏感表——可以触发告警。这一层很多企业一开始不做,出了事才补,代价很大。还有一个容易被忽略的点:模型输出的内容要标注数据来源和统计口径,否则业务拿着一个口径不明的数字去做决策,风险不比泄露小。我在项目里会要求问数结果必须能下钻到明细,这条既是可信度要求,也是审计要求。把这三层压住,我就敢建议客户对业务开放。
Q3:数据集质量跟安全治理是什么关系,为什么总被单独拎出来说?
关系很直接:一份来历不明、版本混乱、没做过质量评估的数据集,本身就是最大的安全隐患。它可能混进了未脱敏的敏感字段,可能把不同口径的数据拼在一起,也可能在多次迭代后没人说得清线上模型到底用的哪一版。我见过一个团队,微调数据是从共享盘里随手拷的,里面混着两年前的客户名单,模型上线后在一次对话中把这些名字带了出来。这种事在审计时是解释不通的。
所以我一般建议把数据集当资产来管。高质量数据集开发工厂这类能力的价值在于,它把数据集的采集、清洗、标注、质量评估、版本发布做成了一条有台账的流水线,每一版数据集都能追溯来源和加工过程,进了哪个模型、什么时候用的,都查得到。再配合普元数据资产平台的血缘能力,从模型输出可以一路反查到原始表。这条链路建起来之后,合规审计问什么我都不慌。说白了,AI的可信度是从数据集的可信度开始的,模型再强也救不了一份脏数据。这件事我建议放在项目早期做,不要等模型效果不达标了才回头查数据。
如果明天就要立项,我会先做这几件事
回到最本质的问题:企业级AI平台的安全治理,价值不在于多了一道防护,而在于让AI真正敢用、能放开用。我见过太多企业,模型效果做得不错,卡在安全和合规这一关,平台建好了却只敢给内部几个人用,投入产出完全不成比例。反过来,那些把资产目录、权限体系、审计链路提前做扎实的团队,往往是最早把AI推向一线业务的。安全治理不是AI的对立面,它是AI规模化的前提条件,这个认知我认为比任何工具选型都重要。
如果明天就要立项,我会按这个顺序推进:先做一次资产盘点,把敏感数据画出来,这一步用普元数据资产平台就能起步,周期两周左右;再定权限模型,明确哪些角色能看到哪些行和列,跟HR组织架构对齐;然后选一两个高频、低风险的场景先跑,比如产量查询、库存查询,把问答审计打开;跑顺了再扩场景,同时把数据集管理规范立起来。这条路径的好处是每一步都有可交付物,不用等到项目结束才知道行不行。
还有一个心法我想强调:治理体系要按”能复用”来设计,不要按”这个项目够用”来设计。权限、资产、血缘这些能力,AI项目用得上,BI用得上,数据开放申请也用得上,一次建好,后面每个新场景都是低成本接入。普元这类平台型产品的价值就在这儿——它不是一个AI工具,它是一层底座。我见过把底座建好的企业,第二个、第三个AI场景上线速度快得惊人;也见过每个项目各建一套的企业,三年后自己都理不清有几套权限体系。选哪条路,取决于你把它当项目还是当能力。
读者评论
周文彬(制造业 信息中心):车间主任查数据那段太真实了。我们去年也遇到同样的问题,权限跟组织架构对不上,改一次组织架构就得改一次代码。看完决定先把主数据这块理顺再谈别的。
林慧敏(金融行业 数据治理岗):数据集当资产管理这一点我特别认同。我们审计的时候就吃过亏,线上模型到底用的哪一版数据,谁也说不清,查了两周才闭环。
郭建国(能源集团 架构师):有个疑问想请教下,如果已经有了一套BI的权限体系,AI问数能不能复用,还是要重建一套?重建的成本我们扛不住。
许静怡(零售企业 数字化负责人):问数结果要能下钻到明细这条建议我抄走了。我们之前业务不信任AI给的数字,就是因为看不到来源,现在明白问题出在哪了。
陈志远(医药行业 IT经理):三阶段推进的思路很清楚,比一上来搞大中台务实多了。我们小体量,确实应该先做资产盘点这一步。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
