正文内容 评论(0)

微软推出Copilot混合推理架构:云端、本地模型可自动切换 本月底上线
2026-10-08 07:47:44  出处:快科技 作者:鹿角 编辑:鹿角     评论(0)点击可以复制本篇文章的标题和链接复制对文章内容进行纠错纠错

快科技10月8日消息,微软宣布,GitHub Copilot将在本月底前支持本地AI模型推理,开发者可在云端模型与设备端模型之间自动或手动切换。

GitHub Copilot是微软推出的AI编程助手,可集成于Visual Studio Code、CLI等工具,根据代码上下文生成补全、解释或重构建议。

目前,GitHub Copilot依赖云端托管模型,由协调器根据性能、成本与准确性路由请求。

微软计划在本月底扩展该机制,允许Copilot自动选择云端模型与本地AI模型,并在后台协调推理任务。

微软为GitHub Copilot用户提供两种模式:自动编排,或强制使用设备端模型。用户可在GitHub Copilot CLI、Copilot应用与Visual Studio Code中设置偏好。

本地模型选择支持指定提供程序、模型或端点。开发者可通过Windows ML选择MAI Code 1.1 Flash,或连接OpenAI兼容的本地端点,并选用其暴露的模型。

微软同时推出MAI Code 1.1 Flash“混合专家”模型,总参数1370亿,活跃参数68亿,并采用量化与推测解码技术优化响应速度与内存占用。

在Surface Laptop Ultra上的实测显示,该模型在复杂任务中的峰值内存使用率、Token利用率与处理速度均显著提升。解码吞吐量测试显示,当提示长度从2K到256K Token时,吞吐量介于每秒40至63个词元。

微软推出Copilot混合推理架构:云端、本地模型可自动切换 本月底上线

【本文结束】如需转载请务必注明出处:快科技

责任编辑:鹿角

文章内容举报

  • 支持打赏
  • 支持0人

  • 反对

  • 打赏

文章价值打分

当前文章打分0 分,共有0人打分
  • 分享好友:
  • |
本文收录在
#微软#Copilot#大模型

  • 热门文章
  • 换一波

  • 好物推荐
  • 换一波

  • 关注我们

  • 微博

    微博:快科技官方

    快科技官方微博
  • 今日头条

    今日头条:快科技

    带来硬件软件、手机数码最快资讯!
  • 抖音

    抖音:kkjcn

    科技快讯、手机开箱、产品体验、应用推荐...