作为一个企业级的 MCP Server 服务,只运行在单机环境上是远远不够的,我们需要让它部署在多个机器上,并且支持分布式的调用,这其中当然还包括负载均衡和节点变更的动态感知等内容。
那么如何让你的 MCP 服务支持这些功能呢?接下来,我们一起来看。
实现方案
MCP 生产级别的分布式部署方案主要包含以下两种实现:
1.MCP Server + Nacos 注册中心:最原始的实现方式,借助 Nacos 提供的健康检查机制,加上负载均衡器实现了分布式部署实现流程如下图所示:
2.使用 Spring AI Alibaba MCP Gateway 实现分布式部署:Spring AI Alibaba MCP Gateway 是基于 Nacos 提供的 MCP server registry 实现,它为普通应用建立一个中间代理层,从而实现了分布式部署的效果。一方面将 Nacos 中注册的服务信息转换成 MCP 协议的服务器信息,以便 MCP 客户端可以无缝调用这些服务;另一方面可以实现协议转化,将 MCP 协议转换为对后端 HTTP、Dubbo 等服务的调用。基于 Spring AI Alibaba MCP Gateway,您无需对原有业务代码进行改造,新增或者删除 MCP 服务(在Nacos中)无需重启代理应用,它的执行流程如下:
显然第二种实现方式更简单,且功能更强大,那我们来看下 Spring AI Alibaba MCP Gateway 的具体配置和代码实现。
具体配置和代码实现
以 Nacos 3.0 版本为例,它的实现步骤如下:
1.在 nacos 中进入 mcp 列表管理功能,创建一个 mcp server。
2.在 mcp server 中添加 tools 相关内容,表明要暴露的 tools 信息。
3.在 tools 信息中,需要配置一个 request template,格式与 higress 目前支持的格式完全兼容。
4.在工程中引入相关依赖。
5.配置 spring.ai.alibaba.mcp.nacos 相关信息。
6.启动服务之后,会读取 nacos 中持有的 mcp server 相关配置信息,对外暴露出来,供 mcp client 进行调用。
这样就完成了企业级 MCP 分布式部署与动态更新的问题,其中包括流量的负载均衡、节点变更动态感知等关键技术的具体实现。
小结
MCP 在面试中被问到的概率很大,因为它是热门的 AI 技术。这其中包括 MCP 生产级别的使用问题,如 MCP 如何进行安全验证?MCP 底层实现原理?底层实现协议?MCP 服务重启后客户端如何自动重连?MCP 如何进行企业级部署?等问题。
参考文档
Spring AI Alibaba 官方博客