跳到主内容
智联观察
← 返回资料库

ShadowBench-MCP:度量 MCP 式工具路由中的「影子调用」

Eyhab Al-Masri, Wenjun Yang

数据集 2026 原文 2026-11-09 arXiv preprint (cs.CR / cs.AI / cs.MA / eess.SY), v1 submitted 2026-11-09; presented at the 35th USENIX Security Symposium (USENIX Security 2026) arXiv:2611.11720 收录 2026-11-16 benchmarkMCPtool-routingagent-securitypolicy-ablationevaluation-metrics

摘要

LLM 智能体越来越多地充当工具、API 与软件供应链工作流的路由器,于是「执行路径」本身(而不只是生成的文本)成为与安全相关的模型输出。本文研究「影子调用」:一种保持任务语义的请求变体,会诱使 LLM 路由器选中更危险的执行路径,可能跳过校验、来源追溯、暂存、脱敏或审计控制,而请求本身并未要求恶意动作。作者提出 ShadowBench-MCP——一套基准与指标,把任务保持度(TPSS)、操作压力(OPSS)与路由几何漂移(RGAS)分开度量,再合成执行前 SODS 分数。在 Groq 托管 qwen/qwen3-32b 路由器上的策略消融实验中,120 个路由决策、六个安全敏感工作流共产生 96 组「原始—变体」对比:效率优先路由的影子调用率 29.2%、安全工具跳过率 26.7%;策略感知路由分别降到 4.2% 与 1.7%(影子调用相对下降 85.7%)。执行前信号区分影子路由的 ROC AUC 最高 0.94。作者明确这是单一路由器的早期证据,属「策略相关的路由层安全效应」,不声称普遍漏洞。

引用本文条目

GB/T 7714-2015

Eyhab Al-Masri, Wenjun Yang. ShadowBench-MCP: Measuring Shadow Invocations in MCP-Style Tool Routing[EB/OL]. arXiv preprint (cs.CR / cs.AI / cs.MA / eess.SY), v1 submitted 2026-11-09; presented at the 35th USENIX Security Symposium (USENIX Security 2026), 2026(2026-11-09)[2026-11-20]. https://arxiv.org/abs/2611.11720.

BibTeX

@misc{almasri2026,
  author = {Eyhab Al-Masri and Wenjun Yang},
  title = {ShadowBench-MCP: Measuring Shadow Invocations in MCP-Style Tool Routing},
  year = {2026},
  organization = {arXiv preprint (cs.CR / cs.AI / cs.MA / eess.SY), v1 submitted 2026-11-09; presented at the 35th USENIX Security Symposium (USENIX Security 2026)},
  howpublished = {\url{https://arxiv.org/abs/2611.11720}},
}

查看原文 ↗

本条目为「智联观察」资料库收录,引用时请注明来源与本页链接。