Code & Chain · Signal Desk

Microsoft 开源 Scope,用 Kubernetes 评测 AI 编码代理是否真懂公司工具

原始來源TSN Newsroom

摘要

Microsoft 开源 Scope,以 MIT 授权、研究预览形式释出,这是一套 Kubernetes 平台,用来评测 AI 编码代理如何使用公司的软体、文件与工具。团队可对代理执行任务,例如 GitHub Copilot、Claude Code、VS Code 搭配 Copilot,定义任务与起始程式码,再以有向无环图的可设定准则比较输出,并记录代理互动与工作区快照以便追溯。评分由 LLM Judge 服务执行,结果绑定可重复使用的版本化设定档,涵盖模型、代理版本、skills 与 MCP 伺服器,便于一次只变动一个因子做对照实验。Scope 附网页入口、CLI 与 REST API,自…

重點整理

  • 平台团队可先用代表性任务建立基准,再比较不同代理与 MCP 设定的表现,降低盲目切换模型的风险。
  • 它把『代理能否找到并正确使用内部工具』变成可重复量测的题目,而不是凭感觉试用。

編輯說明

本頁是 Code & Chain 對公開來源的編輯摘要,可能使用 AI 輔助整理並經自動化流程發布。請以原始來源為準;內容不構成投資、法律或稅務建議。