当前位置: 首页 > ai >正文

mcp 客户端sse远程调用服务端与本地大模型集成实例

        昨天的案例基于mcp stdio本地调用,即mcp的客户端与服务端位于同一台机器上。今天的实例基于mcp服务端与客户端位于不同机器,二者通过sse协议进行通信。当然,对于大模型来说,也可以是远程的机器,因为对大模型的访问是通过标准的http协议进行的。我这为了便于实现,均采用同一台机器,大家在实际部署中,将“localhost"改为实际的ip地址就好。

        本例也将支持多个mcp server,大模型在对话与推理过程中,会用所有mcp server的工具来理解上下文语境。按大模型发展来看,mcp应该会成为应用系统的必须,在此之前是function_calling。大模型今后就是一个底座,对用户是隐藏的。而所有的业务系统和领域小模型会通过mcp万象互联。除非要非常精确与高效,且要边缘部署,才会需要对大模型进行微调与蒸馏,否则mcp应该是一种最佳的部署模式。现在诸如langchain之类的的本地知识库外挂方案,其实并没有把数据集微调到大模型中,只是一种变相的mcp方式。如今mcp已成气候,修炼大成。只是国内的大模型支持微调function的极少,还是openai chatGPT走到了最前面。一旦普遍发布了能微调function的大模型,mcp将大行其道。是以圣人处无为之事,行不言之教,我想大模型当之无愧吧。

1 本地大模型启动

http://www.xdnf.cn/news/1214.html

相关文章:

  • Python简介与入门
  • 多路转接select服务器
  • 数据结构:链表
  • 近几年字节测开部分面试题整理
  • 明远智睿2351开发板四核1.4G Linux处理器:驱动创新的引擎
  • Protues8.11安装只需5步骤即可。
  • 如何创建Vue3工程
  • 状态管理最佳实践:Riverpod响应式编程
  • 理解 C++ 中的隐式构造及其危害
  • STM32 中断系统深度剖析
  • element-ui cascader 组件源码分享
  • Ray是什么,它解决了什么问题
  • nodejs的包管理工具介绍,npm的介绍和安装,npm的初始化包 ,搜索包,下载安装包
  • TypeError: ‘weights_only‘ is an invalid keyword argument for Unpickler()解决
  • 【刷题Day23】线程和进程(浅)
  • elasticsearch 查询检索
  • 1.1 AI大模型与Agent的兴起及其对企业数字化转型的推动作用
  • 变更管理 Change Management
  • opencv 读取3G大图失败,又不想重新编译opencv ,可以如下操作
  • AI催生DLP新战场 | 天空卫士连续6年入选Gartner 全球数据防泄漏(DLP)市场指南
  • 工程投标k值分析系统(需求和功能说明)
  • 【项目】基于MCP+Tabelstore架构实现知识库答疑系统
  • move闯关(更新啦)1
  • 力扣刷题Day 25:反转链表(206)
  • 输入框仅支持英文、特殊符号、全角自动转半角 vue3
  • C# foreach 循环中获取索引的完整方案
  • PCIe体系结构学习入门——PCI总线概述(一)PCI 总线的基础知识
  • [预备知识]4. 概率基础
  • 关于ubuntu密码正确但是无法登录的情况
  • Android-KeyStore安全的存储系统