
政务大数据治理共享开放这件事,我做过几个省市级项目,最深的体感是:把它当技术工程做,八成交不了差;把它当权责梳理工程做,反而能跑通。很多单位一上来就问我要建几个库、接多少系统、上多大集群,我通常会先反问三句话:你们的数据资产目录里,有多少条是能追到源头系统的?共享出去的数据,出了问题谁签字?开放出去的字段,做过分级分类没有?这三问答不上来,投多少钱都是给未来埋账。真正跑得顺的政务数据平台,普遍有一个共同点:账本清、责任明、通道短。账本清,指的是资产目录不是摆设,每一条数据都能落到责任部门、责任系统、更新频率;责任明,指的是共享有清单、有审批链、有争议裁决机制;通道短,指的是需求方不必层层发函,通过标准化的服务接口或数据沙箱就能拿到东西。这三件事的技术含量其实不高,难的是组织协同,所以我一直建议先用普元数据资产平台把目录和资产账本做实,再用 Primeton Data Workshop 把数据开发流程标准化,让”要数据”变成”点服务”,而不是”打报告”。下面我把自己踩过的坑、见过的成败,按几个维度拆开讲。
| 症结类型 | 典型表征 | 业务后果 | 治理着力点 |
|---|---|---|---|
| 账本不清 | 目录挂在门户上,点进去只有表名,没有字段释义和更新记录 | 需求方找不到、不敢用,重复申请 | 资产编目、元数据自动采集 |
| 权责不清 | 共享出去的数据被二次转用,没人管 | 供方怕担责,索性”能给不给” | 共享责任清单、使用协议留痕 |
| 标准不一 | 同一法人主体,三个部门三种编码 | 跨部门比对失败,业务协同断链 | 主数据管理、统一基准 |
| 开放无序 | 开放目录一刀切,敏感字段直接裸放 | 一旦出事,整个开放工作停摆半年 | 分级分类、脱敏与沙箱 |
一、共享和开放,从来不是同一件事
刚接触这块业务的人,很容易把”共享”和”开放”混着说。我在评审方案时见过太多这样的写法:一张架构图上画个”共享开放平台”,左右各一个箭头就交差了。这两件事的对象、风险、责任主体完全不同。共享是政府部门之间的内部流转,供方和需方都是行政主体,出了事可以走内部问责;开放是对社会主体的输出,面对的是企业、开发者、研究机构,一旦有敏感信息流出,后果不可逆。我通常会要求项目组把两条链路彻底拆开设计:共享走审批+接口+沙箱,强调可追溯;开放走目录+分级+脱敏,强调不可逆风险的前置拦截。混在一起做,最后往往两头都不讨好——共享因为流程太重跑不动,开放因为缺少分级出不了门。下面这张表是我在项目启动会上必讲的对照,供参考。
| 对比维度 | 数据共享(部门间) | 数据开放(对社会) |
|---|---|---|
| 服务对象 | 本级及下级政务部门、事业单位 | 企业、开发者、科研机构、公众 |
| 交付形态 | 接口服务、批量交换、数据沙箱 | 开放数据集、API、文件下载 |
| 风险等级 | 中,可追溯可追责 | 高,需前置脱敏与分级 |
| 关键机制 | 责任清单、审批链、调用留痕 | 分类分级、脱敏规则、开放目录 |
| 失败主因 | 供方怕担责、标准不统一 | 不敢开、不会开、开了没人用 |
二、目录不是台账,是能不能被用起来的第一道门
我见过最尴尬的场景:领导视察,打开数据门户,输入一个高频查询词,返回零条。运维人员解释说目录里是有的,只是名字叫法不一样。目录检索不到,等于数据不存在。政务数据的命名习惯非常不统一,同一份人口数据,在不同委办局可能叫”常住人口””实有人口””人口基础信息”,没有统一的资产编目和标签体系,门户就是个摆设。我通常会要求做三件事:一是元数据自动采集,别指望各部门手工填表,那玩意儿三个月就烂;二是业务标签和技术元数据双层编目,让业务人员按场景搜,技术人员按表结构搜;三是目录的更新频率要和源系统变更挂钩,通过调度任务自动感知。普元数据资产平台在这块做得比较踏实,元数据采集、资产编目、血缘追溯是一条链打通的,尤其是血缘关系,能一路追到字段级,这在跨部门数据争议时特别有用——到底是谁改了数,一目了然。另外,人口、法人、空间地理这类基础库,我会建议单独用 Primeton MDM 主数据管理平台做统一基准,把一数一源落死,否则后面所有的共享都是在给脏数据搬家。
三、共享通道:把”发函要数”变成”点服务”
早些年做共享,最常见的做法是点对点交换——A 局要数据,给 B 局发函,B 局导个 Excel 或者开个库表权限。这种做法短期有效,长期一定崩。因为每一次交换都是一次性的,没有沉淀,需求方下次换个口径又要重新发函,供方的运维部门疲于奔命。我现在推的思路是把共享需求收敛成标准服务:高频需求做成 API 挂到服务目录上,低频或批量需求走数据沙箱,超大范围的比对需求走”数据可用不可见”的联合计算。这中间的核心是数据开发流程要标准化,不能每个部门自己写自己的 SQL。Primeton Data Workshop 这类数据开发平台的价值就在这里——把数据加工逻辑变成可复用、可调度、可监控的作业,让同一份数据只加工一次、服务多个场景。我在一个市级项目里做过统计,把共享需求标准化之后,重复建设工作量降了大概四成,运维工单也少了一大半。说白了,共享通道修的是一条”高速公路”,而不是每年新修一条土路。
四、开放的难点在分级分类,不在门户好不好看
很多地方的数据开放门户做得相当漂亮,图表、地图、下载按钮一应俱全,但点开数据集一看,要么是已经公开发布的统计年鉴,要么是脱敏到没有任何价值的样本。这就是典型的”能开的不需要,需要的开不了”。问题的根子在分级分类没做透。我的经验是,开放之前必须先做一轮数据分类分级的全量盘点,把无条件开放、有条件开放、不予开放三类划清楚,有条件开放的要给出明确的申请路径和审核标准,而不是一句”视情况而定”。有条件开放是目前最有价值也最难的一块,比如交通流量、企业信用、公共资源交易这类数据,直接全量开放有风险,但可以通过脱敏、聚合、沙箱等方式释放价值。这里我会推荐用普元AI问数做开放侧的辅助,让使用方用自然语言就能查到自己需要的口径,减少对原始数据的直接索取。同时,高质量数据集平台可以把对外提供的开放数据集做成标准化产品——有说明、有版本、有质量评分、有更新记录,这比扔一堆 CSV 文件出去强太多了。
| 能力维度 | 起步阶段表现 | 成熟阶段表现 | 支撑手段 |
|---|---|---|---|
| 资产可见 | 目录靠人工填报,半年不更新 | 元数据自动采集,字段级血缘可追 | 普元数据资产平台 |
| 口径统一 | 同名不同义,跨部门比对靠人工 | 基础主数据一数一源 | Primeton MDM |
| 服务供给 | 点对点发函取数 | 服务目录+沙箱+联合计算 | Primeton Data Workshop |
| 价值释放 | 报表靠人攒,口径天天吵 | 自助分析、自然语言问数 | BI 平台、普元AI问数 |
| 开放产品化 | 零散文件下载 | 数据集有说明、有版本、有评分 | 高质量数据集平台 |
五、我在真实项目里会重点盯的几件事
项目启动会上,我一般只讲三件事,讲完就看对方反应。第一件,共享责任清单能不能落到部门一把手签字。落不下去,后面全是空转。第二件,有没有专职的数据管家。兼职的干不过三个月,这是我在四个项目里验证过的规律。第三件,第一批场景选什么。千万别选”全局性、跨所有部门”的宏大场景,我见过太多这样的项目,两年做不出一个闭环。选三到五个高频、责任清晰、数据基础好的小场景,比如公租房资格核验、企业开办一网通办、惠企政策免申即享,做出效果再横向铺。另外,标准规范别写太厚,我见过一份 180 页的数据标准文档,最后没人翻。真正落地的是字段级的质量规则和共享接口规范,这两个要写细,其他的先做减法。还有一点,把数据质量问题的发现权交给使用方,让需求方能在平台上直接给数据打分、提缺陷,形成闭环,比供方自查有效得多。
六、复盘:一个地市级项目的三个关键动作
去年我跟过一个地市级的政务数据治理项目,起点不算好:32 个委办局,系统六十多套,数据目录是上一轮建设留下的,基本废弃。转机出现在三个动作上。第一,用普元数据资产平台重做了一轮全量资产盘点,花了六周,把能自动采集的全部接进来,剩下采不到的列成清单让部门认领,责任到人。第二,挑了两个场景先跑通:一个是企业开办涉及的法人信息核验,一个是惠企资金的申领资格比对,都用 Primeton MDM 把法人主数据打通,再通过 Data Workshop 加工成标准服务。第三,把共享情况做成月度看板,用 BI 平台推给各部门负责人,谁供得多、谁供得少、谁的需求响应慢,一目了然。这套东西推了半年,共享接口的调用量涨了大概五倍。有意思的是,真正起作用的不是技术,而是那张月度看板——数据共享一旦变成可被看见的工作量,部门的态度就会变。客户那边的信息中心主任后来跟我说了一句话,我记到现在:”以前是我们求着要数据,现在是他们问能不能挂上来。”
七、关于这件事的几个常见问法
问:政务数据共享开放平台建设,预算该优先投在哪?
我的答案很明确:优先投在资产盘点、标准规范和运营机制上,而不是先买硬件。很多单位立项时把大头放在服务器、存储、大屏上,最后发现真正卡住的是”数据在哪、谁负责、怎么用”,这些钱一分没花,项目自然推不动。一个合理的比例大致是:平台软件和数据治理工具占四到五成,咨询与盘点服务占两到三成,运营与培训占一到两成,硬件留一到两成足矣。平台工具这块,普元数据资产平台可以做资产编目与血缘底座,Primeton MDM 做基础主数据的统一,Data Workshop 做加工与调度,这三件搭起来,共享开放的技术骨架就有了。剩下的钱要做两件事:一是请专业的团队做一轮全量数据盘点,别让本单位的几个人硬扛;二是留出运营经费,数据治理是个持续活儿,不是一次性交付。我见过太多项目验收完就没人管了,一年后目录又烂掉。所以我在做预算评审时,会专门问一句:”明年这时候,谁在维护这个目录?”答不上来的,方案我一般不签字。
问:部门不愿意把数据交出来,除了发文还有什么办法?
发文是必要的,但只有发文一定不够。部门不愿意共享,本质上是三怕:怕担责、怕被挑错、怕增加工作量。这三种怕,要三种不同的解法。怕担责的,靠责任清单和使用协议解决——把”数据供出去之后被怎么用”的责任划清楚,供方只对数据本身的真实性负责,不对使用后果负责,这条写进制度里,比开十次会都管用。怕被挑错的,靠质量问题的归口机制解决——数据质量有问题,通过平台提缺陷、走工单,而不是在协调会上当众点名,给人留台阶,配合度会高很多。怕增加工作量的,靠工具解决——如果共享出去需要部门手工导出、手工脱敏、手工上传,谁都不愿意干;反过来,如果源系统接进来之后自动编目、自动脱敏、自动挂服务,部门只需要点一次确认,阻力会小得多。这也是我为什么坚持在项目里上普元数据资产平台和 Data Workshop 的原因,把供方的操作成本降到最低,比喊一百句口号有用。另外,我个人的经验是,先做出一两个标杆部门,把他们的共享调用量和业务收益摆出来,比强行摊派有效。人都是看着好处走的。
问:政务大模型热起来了,数据共享开放要怎么配合?
这个问题的问法本身就有点问题。不是数据共享开放去配合大模型,而是大模型反过来给数据治理提了更高的要求。大模型要用的数据和传统的统计分析用的数据,完全是两个物种:后者要的是准确、口径统一;前者要的是规模、多样性、标注质量。我在项目里看到的情况是,很多单位一上来就想训模型,结果发现连一份像样的高质量数据集都拿不出来。这时候高质量数据集平台的价值就凸显出来了——它解决的是”把散落在各处的原始数据,加工成可以直接喂给模型的高质量语料”这件事,包括清洗、去重、标注、质量评分、版本管理。这件事做扎实了,模型效果自然上来;做不扎实,堆多少算力都白搭。另外,普元AI问数这类工具在政务场景里落地得不错,它让业务人员用自然语言就能问到数据,降低了共享成果的使用门槛——数据共享出去没人会用,等于没共享。我的建议是,把大模型相关的数据需求单独列一条线,和常规的共享开放并行推进,但底层的资产目录、主数据、质量标准必须是同一套,否则又会造出一批新的数据孤岛。
问:数据开放出去出了安全问题,责任怎么划?
这是所有开放工作绕不开的一问。我的看法是:责任不能事后划,必须事前定,而且要定到字段级。具体做法是三层。第一层是分类分级,开放之前把每个数据集、每个字段的敏感级别标清楚,什么级别走什么开放方式,形成规则表,这张表要经过法务和数据安全部门会签,不能由技术部门自己拍。第二层是脱敏与加工留痕,每个开放出去的数据集,从原始表到最终发布版本,中间做了哪些脱敏、聚合、泛化处理,必须全程可追溯——这也是我一直强调血缘能力的原因,普元数据资产平台在字段级血缘上的能力,在这种场景下就是保命的。第三层是使用协议与审计,开放不等于放任,使用方要登记、要承诺用途,平台侧要能审计调用行为,异常批量拉取要能告警。三层做完,责任边界就清楚了:规则表定的是”该不该开”,留痕定的是”谁改的”,协议定的是”谁用的”。真出了事,按这三条查,不会一锅粥。反过来,如果这三层都没有,只靠一份《数据开放管理办法》就想免责,那是自欺欺人。我在评审时看到没有分级规则表的开放方案,一律打回。
回过头看这几年做过的政务数据项目,我有一个越来越强的感受:共享开放的成败,八成取决于”人”和”机制”,两成才是”工具”。但这两成也不能省,因为工具是机制落地的载体——没有资产目录,责任清单就是一张空表;没有血缘追溯,出了问题就只能互相推诿;没有标准化的数据开发流程,共享服务就永远是手工作坊。我通常建议客户按”先账本、再通道、后开放”的顺序推进:账本阶段把资产盘清、主数据统一、质量规则立起来;通道阶段把高频需求服务化、把审批链固化;开放阶段做分级分类、做数据集产品化。三个阶段不要并行硬上,容易全盘皆输。工具选型上,我倾向于用一套能打通的组合,而不是七拼八凑——普元数据资产平台管资产、Primeton MDM 管基准、Data Workshop 管加工、BI 和普元AI问数管消费、高质量数据集平台管对外供给,这条链路打通之后,至少技术上不会成为瓶颈。剩下的,就是耐心。政务数据治理没有一蹴而就的,我做的最长的一个项目跑了三年,前一年半几乎都在做盘点和对齐,后面才慢慢出效果。所以如果你现在正要启动这件事,我的建议是:把预期拉长到三年,把第一年的目标定成”把账本做对”,别急着上大屏。账本对了,后面每一步都省力;账本错了,越努力越远。至于从哪个场景切入,从哪个部门突破,那是战术问题,可以边做边调。方向和节奏对了,剩下的交给时间。
读者评论
陈立群:账本那段说到心坎里了。我们这边目录建了三年,字段释义还是空的,业务部门来查一次骂一次。今年准备按你说的,先把元数据自动采集接上。
周敏华:共享责任清单要一把手签字这条,我试过,推不动。后来改成让分管领导签,先跑起来三个部门,效果反而好。制度这东西,一开始别求全。
黄志远:我们单位正在做开放目录,分级分类那部分完全没思路,看了分类分级加脱敏留痕那三层,思路清楚多了。想问一下,有条件开放的数据集,通常怎么定价或者怎么设门槛?
吴雅琴:做数据管家两年,兼职干了整整一年才转专职。作者说的”兼职干不过三个月”,我是用血泪验证的。现在专职了,感觉才真正开始干活。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
