DeepL 进军语音翻译:发布实时语音到语音翻译套件及 API

早报6个月前发布 小马良
191 0

以高精度文本翻译闻名的 DeepL 正式将其核心能力扩展至语音领域,发布了一套全新的语音到语音(Speech-to-Speech)翻译套件。此举标志着 DeepL 从单纯的文本处理工具向全模态实时沟通平台的战略转型,旨在解决跨语言交流中的延迟与准确性平衡难题。

  • 申请地址:https://www.deepl.com/en/products/voice/voice-to-voice-early-access-programme
DeepL 进军语音翻译:发布实时语音到语音翻译套件及 API

核心产品与功能

DeepL 的新套件覆盖了多种沟通场景,并提供了灵活的集成方式:

1. 会议平台插件 (Zoom & Microsoft Teams)

  • 实时音频翻译:参会者可以直接听到翻译成自己母语的语音,无需阅读字幕,保持眼神交流和自然互动。
  • 实时文本字幕:同时在屏幕上显示翻译后的文本,作为辅助参考。
  • 早期访问:目前处于早期访问阶段,组织可通过等待名单申请试用。

2. 移动与网络对话应用

  • 面对面/远程交流:适用于双人或多人对话,支持移动端和 Web 端。
  • 群组对话模式:针对培训、研讨会等场景,参与者可通过扫描二维码加入同一会话,实现多语言实时互通。

3. 开发者 API

  • 定制化构建:允许企业和开发者将 DeepL 的语音翻译能力集成到自己的应用中,如呼叫中心系统、客户服务机器人或定制沟通工具。
  • 行业术语适配:支持自定义词汇表,能够学习并准确翻译行业特定术语、公司名称及人名,确保专业场景下的准确性。

技术架构与挑战

当前架构:STT → MT → TTS

DeepL 目前的语音翻译系统采用经典的三段式流程:

  1. 语音转文本 (STT):将源语言语音转换为文本。
  2. 机器翻译 (MT):利用 DeepL 核心的高精度文本翻译引擎进行转换。
  3. 文本转语音 (TTS):将翻译后的文本合成为目标语言语音。

优势:得益于 DeepL 在文本翻译领域多年的深耕,其翻译质量(尤其是语义准确性和语境理解)处于行业领先地位。

挑战:主要在于延迟控制。DeepL CEO Jarek Kutylowski 指出,平衡“说话与播放之间的低延迟”与“高翻译准确性”是最大难点。

未来愿景:端到端模型

DeepL 计划在未来开发端到端(End-to-End)语音翻译模型,直接从一个语言的语音映射到另一个语言的语音,跳过中间的文本步骤。这将进一步降低延迟,并可能更好地保留说话人的语气和情感特征。

市场竞争格局

DeepL 进入的是一个竞争激烈且资金充裕的赛道,主要竞争对手包括:

竞争对手核心特点差异化定位
Sanas实时口音修改侧重呼叫中心代理,改变口音而非完全翻译,获资 $6500万。
Camb.AI视频配音本地化专注媒体娱乐行业,大规模视频内容配音与唇形同步。
Palabra保留原声的实时翻译由 Alexis Ohanian 支持,旨在保留说话人原始声音特征,与 DeepL 形成直接竞争。
DeepL高精度文本翻译底座依托其在文本翻译领域的权威地位,强调语义准确性与专业术语适配。
© 版权声明

相关文章