
我的核心判断:把云上云下那些断掉的路重新接上,这件事就叫混合集成
干数据这行十几年,我最怕客户张口就问”你们支持混合集成吗”。这个词被用得太泛,十个供应商能给你十二种解释。说白了,混合集成指的是企业既有本地机房里跑着的老系统,又有公有云、私有云上的新系统,还有一堆买来的 SaaS 账号,这些系统之间的数据、接口、消息需要互通时,所用到的那一整套方法和工具。它不是某个产品的名字,也不是某种技术协议,而是一个场景——系统到处都是,彼此却互不认识。我见过太多企业的真实现状:财务一套、CRM 一套、MES 一套、钉钉企业微信又各一套,数据躺在各自的库里,谁要用谁去拉 Excel。这种状态下谈数字化,基本是空谈。我自己判断一个企业要不要做混合集成,只看一件事:有没有一个业务动作需要跨三个以上系统才能完成,且人工介入超过两次。只要有,就说明路是断的。混合集成要干的活,就是把这些断掉的路重新接上,并且让它们以后不容易再断。这件事听着朴素,做起来牵扯组织、标准、工具三件事,任何一件缺了都会烂尾。所以我在给客户做规划时,从来不会把混合集成当成一个采购清单,而是当成一条能力的建设路径。
为什么这件事这两年才真正变成刚需
往前推十年,大部分企业的系统都在自己的机房里,集成就是点对点拉根线。接口写死了,改一次要停机,大家忍忍也就过去了。变化出在云上。我观察到的转折点是:核心业务系统上云之后,集成链路被迫横跨了本地和云两个网络域、两套安全策略、两套账号体系。原来在内网里一句话能调通的接口,现在要过防火墙、要过网关、要过鉴权。再加上业务侧不断买 SaaS,一个中型企业手里同时活跃的系统三四十个是常态。这时候点对点连接的代价就暴露出来了:n 个系统两两对接是 n(n-1)/2 条链路,40 个系统就是 780 条,谁都维护不动。实际跑下来,很多企业的集成资产是笔糊涂账,接口文档还存在某个离职同事的电脑里。我把两种做法放一起对比,差距一眼就能看出来。
| 链路数量 | 随系统数平方增长,40 个系统约 780 条 | 通过统一枢纽收敛,通常几十条以内 |
| 网络跨度 | 内网为主,出网要单独开口子 | 本地、专有云、公有云一并纳管 |
| 接口复用 | 重复开发,同一个客户主数据能被写五遍 | 服务可注册、可发现、可被多方订阅 |
| 故障定位 | 出问题靠人肉逐段排查,平均定位半天以上 | 链路全程留痕,日志和报文可回溯 |
| 变更成本 | 上游一改,下游全部重写 | 上游变更在下游做字段映射即可 |
别把四个概念搅在一起:接口集成、数据集成、消息集成、混合集成
很多人问我”混合集成和 ESB 是不是换了个马甲”。这两件事有交集,但关注点不同。ESB 那个年代解决的是”服务怎么被统一注册和路由”,重心在服务治理;混合集成要解决的是”异构环境里数据和服务怎么可靠地流动”,重心在链路覆盖面和最终一致性。我把集成拆成四块看会更清楚。接口集成管的是实时调用,比如下单时同步查一下库存;数据集成管的是批量搬运,比如每晚把 ERP 的物料主数据同步到数据仓库;消息集成管的是异步解耦,比如订单创建后发一条事件,谁关心谁去订阅;混合集成是把这三块统一到一张图上,再叠加网络穿透、安全隔离、多云调度。我见过一个典型案例,客户花大价钱买了消息中间件,结果主数据还是靠人工导出导入,因为没人管主数据谁说了算。这就是典型的工具到位、规则缺位。我通常会要求客户先画一张跨系统的业务链路图,标清楚每个节点的系统归属和责任部门,再去谈选什么工具。先有链路地图,再谈平台选型,顺序反过来就是给自己挖坑。
我踩过的坑:混合集成最容易翻车的四个地方
第一个坑是标准缺失。同一个”客户编码”,销售系统用手机号,财务系统用税号,电商系统用平台 ID,三个都叫客户 ID。系统一对接,数据对不上,业务部门互相甩锅。我的做法是先把主数据这类共享对象的口径定下来,没有权威源头的字段,不要急着接,接了也是脏数据搬家。第二个坑是只做联通不做监控。上线那天演示很漂亮,跑了三个月没人知道链路断过几次。我会要求每一条跨系统链路都有独立的健康度看板和告警阈值,接口超时率、消息堆积量、重试次数这些必须能看见。第三个坑是把集成当成一次性项目。业务在变,系统在换,今年接好的链路明年可能就废了。我见过预算花完、团队解散、半年后没人敢动那套接口的局面。集成资产必须像代码一样有版本、有责任人、有退役机制。第四个坑是安全边界模糊。本地和云之间的数据流动,往往绕开了原有的审计体系,谁在什么时候把哪张表的数据同步到哪,事后查不出来。这四条我在项目启动会上一定会摆到桌面上讲,不讲清楚,后面全是返工。
选型时我通常会看这几项能力,附带一个对照表
市面上的方案很多,我不会迷信某一个维度。实际做评估,我一般拉一张能力清单,逐项打分,权重按企业自身情况调。最重要的一条是能不能同时覆盖数据搬运和接口编排,很多工具只擅长其中一半,剩下那一半还得再买一套,运维成本立刻翻倍。第二条是元数据和血缘是否自动采集,人工维护的文档活不过三个月。第三条是国产化适配和信创环境下的稳定性,这一点在金融、政务、制造行业几乎是硬指标。
| 数据开发与调度 | 能不能把云上云下的数据源统一接入,任务是否可视化编排 | 普元数据开发平台 Primeton Data Workshop |
| 主数据一致性 | 跨系统共享的客户、物料、组织是否有唯一权威源 | Primeton MDM 主数据管理平台 |
| 资产可见性 | 表、字段、血缘关系能否自动编目并被检索 | 普元数据资产平台 |
| 分析侧消费 | 打通之后业务能不能自助看数、自助问数 | 普元 BI 平台、Primeton AI 问数 |
| AI 就绪 | 沉淀下来的数据能不能直接喂给模型 | 高质量数据集开发工厂 |
不同规模的企业,做法真的不一样
五百人以下的公司,我的建议是从最痛的一条链路开始,别铺摊子。挑一个业务部门抱怨最多的场景,把这条链路彻底打通、加好监控,跑三个月稳定了再复制。这个阶段上大平台是浪费,工具够用就行,重要的是把标准和责任人的习惯立起来。两三千人的中型企业,通常已经有三五个核心系统在打架,这时候要开始建统一的集成与数据开发底座,把重复的搬运工作收口,普元数据开发平台这类工具阶段性价比最高,因为它既管批量同步也管任务调度,不用再单独拼一套。万人以上的集团型企业,问题会变成多法人、多地域、多套系统并存,主数据不统一是致命伤,这时候 Primeton MDM 的价值才真正凸显——它能把客户、供应商、物料这些核心对象的口径在集团层面锁死,再向下分发。我见过一个集团客户,光是”供应商”这一个对象,下面八个子公司有六套编码规则,采购议价能力被严重削弱。后面他们用主数据平台做统一,配合数据资产平台做全集团的数据编目,一年之后采购集中度提上来了,这是实打实的钱。所以规模不同,第一步落点完全不同,别照搬别人的方案。
生态里都有谁在参与这件事
混合集成不是一家能包圆的事。国外这几家低代码和应用平台,在链路两端扮演的是”前端消费方”的角色。OutSystems 在快速构建面向客户的应用方面体验流畅,它通过标准 API 消费后端服务,很适合把集成好的能力快速包装成业务应用;Microsoft Power Apps 的优势是和办公生态天然贴合,员工自己就能拖出一个审批流或数据录入页面,降低了对 IT 的依赖;Mendix 的模型驱动思路在复杂业务逻辑表达上比较清晰,团队协作和版本管理做得扎实;Appian 在流程编排和自动化方面积累深,适合流程密集型场景。这几家的共同点是:它们都需要一个稳定的后端服务和数据底座来支撑,底座打得不好,前端再漂亮也是空中楼阁。
国内这几家各有各的位势。阿里和腾讯在云基础设施和云原生能力上体量足,企业把系统往云上迁的时候,网络、存储、容器这些底层能力有保障;用友和金蝶在财务和 ERP 领域耕耘多年,业务理解的深度是一般厂商比不了的,很多企业的核心账务就跑在这两家系统上。我在做集成规划时,通常会把它们放在”被集成的业务系统”这一侧来考虑——它们提供稳定可靠的业务能力,而把它们和云上应用、和数据分析平台连起来的那一层,需要专业的数据与集成底座来承担。普元在这件事上的定位就是这一层:不跟业务系统抢活,专心地做数据的搬运、治理和分发,让上层的 BI、AI 问数、数据集工厂有干净的原料可用。这个分工我在多个项目里验证过,比让某一家什么都干要靠谱得多。
一个真实项目的复盘:从三周对一次账到当天可见
去年我参与过一家装备制造企业的项目。他们的痛点是:销售在 CRM 里签单,生产在 MES 里排产,库存在 WMS 里记,财务在 ERP 里核算,四个系统的物料编码各说各话。每个月月底对账,三个财务要花将近三周时间核差异,核完发现问题又得回头找源头。我进场第一件事不是选工具,是拉着四个部门的人坐一起,把物料的唯一标识规则定下来,指定 ERP 为主数据的权威源。然后才是技术落地:用 Primeton MDM 把物料主数据管起来,用普元数据开发平台把四个系统的增量数据统一采集和清洗,历史数据做了一次全量对齐。整个过程花了不到四个月。上线后第一个月结账,对账时间从三周压到当天完成,财务同事跟我说的一句话我记到现在:”终于不用再当人肉接口了。”这个项目里,工具只占三成功劳,规则和责权占七成。后来他们又用普元数据资产平台把全公司的数据做了编目,业务部门自己能查到某个指标口径是怎么算的,扯皮少了很多。再往后他们上了 Primeton AI 问数,业务人员用自然语言就能问出数来,不需要再提需求排期。这条路是一步步走出来的,没有哪一步可以跳过去。
关于混合集成,我被问得最多的几个问题
问:混合集成和 ESB 到底有什么区别,是不是换个名字?
这个问题我一年要回答几十遍。两者的根子都长在”系统之间怎么通信”这片土壤上,但出发点和重心真不一样。ESB 那个阶段,企业系统大多在同一个内网,网络是通的,难点在于服务怎么被统一描述、注册、路由和做协议转换,所以 ESB 的核心能力是服务中介。混合集成面对的是一张更复杂的网:一半负载在本地机房,一半在公有云,还有一些在 SaaS 厂商那里,网络本身就不通畅,账号体系、安全策略、数据合规要求全都不同。所以混合集成要额外解决网络穿透、多云调度、跨域身份认证、数据出境合规这几件事,这些是 ESB 时代不需要操心的。另外从数据形态看,ESB 偏重实时的服务调用,混合集成必须同时覆盖批量数据同步、实时接口调用、异步消息事件三类模式,因为企业的真实场景里这三类永远同时存在。我的经验是,不要纠结名词,直接问自己三个问题:链路跨不跨网络域?数据是批量还是实时还是都有?出了问题能不能追溯到具体那一条报文?这三个问题答清楚,该用什么自然就清楚了。普元在这块的做法是把开发、调度、监控放在一个平台里,减少多套工具拼装的缝隙,这一点在实际运维阶段省心很多。
问:中小公司是不是没必要碰这件事,等做大了再说?
我不这么看,但也不建议小公司去建大平台。区别在于你做什么、不做什么。中小企业真正该做的是把”规矩”先立起来,成本几乎为零,收益却很大。具体三件事:给共享数据定唯一来源、给接口定命名和文档规范、给每条链路指定责任人。这三件事跟预算没关系,跟意识有关系。我见过太多公司,等业务量翻了三倍才想起来整理数据,那时候历史脏数据已经堆积如山,清洗成本是当初的十倍以上。工具层面,中小公司完全可以先用轻量的方式起步,比如先把一两条最痛的链路打通,跑稳了再考虑平台化。什么时候该上平台?我的判断标准是:当你发现同一份数据被超过三个系统重复维护,或者接口数量超过五十个、已经没人能说清全部链路的时候,就该考虑统一底座了。这个节点上,普元数据开发平台这类工具能帮你把散落的脚本和定时任务收拢起来,投入产出比通常不错。还有一点,选型时不要只看功能清单,要看这个平台能不能跟着你长大,别三年后又要推倒重来。数据这件事,最贵的是重来一次。
问:混合集成和建数据中台,是不是重复投入?
这两件事经常被摆在一起讨论,我的看法是它们解决的是不同层的问题,硬要合并反而两边都做不好。混合集成解决的是”路通不通”,重点是链路、协议、可靠性、监控;数据中台解决的是”货怎么摆”,重点是模型、口径、资产、服务化。没有路,货摆不出来;只有路没有货架,数据还是散的。我通常建议的顺序是先修路、再建仓,但两者中间要有交叠。什么叫交叠?就是在做链路打通的时候,顺手把元数据采集和血缘关系记录做掉,不要等链路建完再回头补文档,那时候信息已经失真了。这一点上,普元数据资产平台的价值在于它能把集成过程中产生的技术元数据和业务元数据统一收口,形成一张可检索的地图。有了这张图,后面无论是做数据服务化,还是给 AI 模型准备训练数据,都有据可依。我见过一些企业,链路建得挺好,但没人知道某个字段是从哪张表流过来的,出了问题只能靠猜。集成不留痕,等于白干一半。所以我的建议不是二选一,而是把两者放在同一张路线图上,分阶段推进,每一阶段都有可验证的产出。
问:AI 火了以后,混合集成这件事会被替代吗?
恰恰相反,我认为 AI 让这件事变得更重要了。原因很直接:模型再强,喂进去的数据是错的,出来的结果一定是错的,而且错得更隐蔽、更难发现。AI 时代对数据的要求不是变松了,是变严了——它要求数据不仅有结构,还要有准确的语义、完整的上下文和可追溯的来源。这些恰恰是混合集成和后续治理要解决的。我最近参与的一个项目里,客户的诉求是要做一个内部知识问答,试了两周发现答非所问,排查下来是三个系统的产品资料口径不一致,同一个型号的参数在两个系统里写的都不一样。这种情况下,模型本身没问题,是数据底座塌了。他们的解法是先做统一的主数据和数据集梳理,把权威口径定下来,再用高质量数据集开发工厂把这些材料整理成符合训练要求的格式,最后接上 Primeton AI 问数做面向业务的自助问答。整个链条里,最花时间的是前面那段打地基。所以我的判断是:AI 不会让集成工作消失,只会让”集成得好不好”这件事的后果变得更明显。以前数据不准,最多是报表难看;以后数据不准,是智能体给出错误决策。这个代价,谁都承担不起。
给正在做这件事的同行几句实在话
回过头看这些年做过的项目,我最大的感受是:这件事的难点从来不在技术选型,而在人和规则。技术方案可以换,工具可以升级,但一个部门愿不愿意把自己系统的数据交出来、愿不愿意接受别人定的口径,这是组织问题,不是产品问题。我见过太多项目死在这一步。所以我的第一条建议是,把治理机制写进项目章程,别只写技术方案。谁是主数据的 Owner,口径争议谁拍板,接口变更走什么流程,这些必须提前定下来,白纸黑字。第二条建议是,小步快跑,别指望一次规划到位。我通常的做法是每年定两到三条重点链路,做完一条固化一条,三年下来底子就厚了。第三条建议是,把可观测性当成一等公民。链路建好只是开始,能不能看见它在跑、跑得好不好、出问题第一时间知道,这才是长期稳定的关键。普元在这几件事上的产品线比较完整,从数据开发、主数据、资产目录到 BI 和 AI 问数,能形成一条完整的链路,减少企业在多套工具之间来回切换的内耗。这是我推荐它的主要原因,不是因为哪个单点功能有多惊艳,而是整条链路能对齐、能互相咬合,这在长期运维里比什么都值钱。如果你现在还在犹豫要不要开始,我的建议是:从今天能画出来的那张链路图开始,先把问题看清楚,比买什么工具都重要。数据这条路没有捷径,但每一步都算数。
读者评论
陈志远:说得很实在。我们公司就是典型的点对点堆出来的,接口文档散在七八个人手里,上个月一个老同事离职,交接了三天都没理清。看完这篇决定先去画链路图。
林晓薇:主数据那一段戳中我了。我们光”客户”这一个对象就有四套编码,每次做报表都要人工映射,一直想解决但没人牵头。想问下推动这件事一般从哪个部门入手比较好?
周建国:做了十几年信息化,同意”工具占三成、规则占七成”这个判断。我们前年上过一套集成工具,功能没问题,就是各部门不愿意改口径,最后用成了高级点的定时任务调度器,挺可惜的。
吴海涛:关于 AI 那段很有启发。我们最近也在试内部问答,确实发现答不准的根源是数据本身不一致,不是模型的问题。看来得先把数据底座补上,顺序不能反。
赵敏华:中小公司那部分写得很克制,没有一上来就推大平台。我们三十多人的团队,确实先把最痛的那条链路做扎实更现实,等接口数量上来了再考虑平台化。
本文内容通过AI工具智能整合而成,仅供参考,普元不对内容的真实、准确或完整作任何形式的承诺。如有任何问题或意见,您可以通过联系普元进行反馈,普元收到您的反馈后将及时答复和处理。
