跳到正文
ElevenLabs 官方博客· Min Kim·· 1 天前AI 评分58

ElevenLabs 发布 Eleven Realtime 语音到语音模型 v1 Mini 与 v1 Max

Introducing Eleven Realtime: a simpler way to build natural voice agents

先看结论

Eleven Realtime 把语音识别、轮次控制、LLM 和语音合成打包成完整语音智能体,官方评测显示 v1 Max 兼顾准确率与响应速度,适合需要多步推理和工具调用的场景。

报道讲了什么

  • ElevenLabs 推出 Eleven Realtime 系列语音到语音模型,同时发布 v1 Mini 和 v1 Max 两个版本。
  • 两款模型支持 90 多种语言,可使用 ElevenLabs 声音库中 17,000 多个声音。

可以做什么

  • v1 Mini 面向 AI 助手、教师和互动角色等低成本自然对话场景。
  • v1 Max 面向客户支持、线索筛选和多步工作流等需要按流程推理的任务。
  • Realtime API 兼容 OpenAI Realtime API,已有集成只需改端点和模型名。

怎么使用

  1. 在 ElevenAgents 中创建或打开智能体,从下拉菜单选择 Realtime 模型。
  2. 已有 OpenAI Realtime API 集成时,保留代码并修改指向的端点和模型名。

结果与限制

  • Realtime API 仅通过 WebSocket 连接,WebRTC 集成需先迁移到 WebSocket。
  • Realtime API 与 ElevenAgents 分开运行,需要渠道、知识库等平台功能应直接在 ElevenAgents 上构建。
  • v1 Mini 工具调用任务完成率为 60.3%,官方因此建议工具调用密集的场景选 v1 Max。

使用入口与依据

来源:ElevenLabs 官方博客 · elevenlabs.io

事件后续

查看事件全部

正在读取事件进展…