Artificial Analysis 评测:Cartesia Managed Agents 语音智能体竞技场 Elo 1115,任务成功率 91.7%

Artificial Analysis@ArtificialAnlys

译自英文

Cartesia Managed Agents 在 Artificial Analysis 语音智能体竞技场(Speech Agent Arena)上获得 1115 的 Elo 分数,比 Cartesia 早先的语音智能体产品 Cartesia Line 高 98 分,任务成功率从 77.5% 提升到 91.7% Managed Agents 是 @CartesiaAI 用于构建和部署语音智能体的全托管平台。它是一个级联系统:Cartesia 自家的 Ink 语音转文字模型和 Sonic 文字转语音模型,围绕开发者自选的 LLM 运行。我们在评测 Cartesia Managed Agents 时使用 GPT-5.5 作为 LLM,并使用 Skylar 和 Daniel 两种音色。 要点: ➤ 语音智能体竞技场:Cartesia Managed Agents 的 Elo 为 1115(95% CI 1086-1144,685 个样本),比 Cartesia Line 的 1017(95% CI 985-1049)高 98 分 ➤ 智能体任务:在需要工具调用的任务上,Cartesia Managed Agents 的 Elo 为 1112 ➤ 任务成功率:在符合条件的工具调用对话中,91.7% 以正确的、完成任务的最终工具调用结束 祝贺 @CartesiaAI 团队! 更多细节见下方 ⬇️
X

来源1

由 dalao.ai 撰写标题;引用的帖子以原文为准,著作权归原作者所有。