OpenBMB 发布端云协同长程智能体执行的系统研究 EC²-Bench
译自英文
云端什么时候该替端侧智能体执行,什么时候只需给建议?
我们对长程智能体执行中的端云协同做了系统研究。借助 EC²-Bench,我们在 128 个可执行任务上评估了四种协同策略,同时衡量任务完成度、资源成本和隐私暴露。
三个主要发现:
1️⃣ 云端预算小,收益大(成本效率)。端侧用 Qwen3.5-9B、云端用 GLM-5.3 时,纯端侧得分 39.12;最佳协同达到 60.46——约为纯云端(82.70)的 73%——成本仅 $8.73,约为纯云端 $56.42 的 15%。
2️⃣ 性能趋同,隐私不趋同。在 Qwen3.7-Plus 上,最佳协同得分 76.84,纯云端为 82.70;策略间差距缩小到仅 3.67 个完成度分点,但隐私暴露相差 66.23 个百分点——而且表现最好的策略泄露最多。
3️⃣ 模式随端侧能力翻转。端侧较弱时,最好用一个外部路由器让云端执行(2B……X来源2
- @OpenBMBX云端什么时候该替端侧智能体执行,什么时候只需给建议? 我们对长程智能体执行中的端云协同做了系统研究。借助 EC²-Bench,我们在 128 个可执行任务上评估了四种协同策略,同时衡量任务完成度、资源成本和隐私暴露。 三个主要发现: 1️⃣ 云端预算小,收益大(成本效率)。端侧用 Qwen3.5-9B、云端用 GLM-5.3 时,纯端侧得分 39.12;最佳协同达到 60.46——约为纯云端(82.70)的 73%——成本仅 $8.73,约为纯云端 $56.42 的 15%。 2️⃣ 性能趋同,隐私不趋同。在 Qwen3.7-Plus 上,最佳协同得分 76.84,纯云端为 82.70;策略间差距缩小到仅 3.67 个完成度分点,但隐私暴露相差 66.23 个百分点——而且表现最好的策略泄露最多。 3️⃣ 模式随端侧能力翻转。端侧较弱时,最好用一个外部路由器让云端执行(2B……译自英文 · 查看原文 ·
- arXiv研究Empowering Edge Agents: A Systematic Analysis of Edge-Cloud Collaboration in LLM Agent Execution英文原标题 · 查看原文 ·
由 dalao.ai 撰写标题;引用的帖子以原文为准,著作权归原作者所有。