Gummy是什么：
Gummy是通义实验室在2024年云栖大会上推出的端到端语音翻译大模型，能够实时流式生成语音识别与翻译结果，支持十余种语言的语音输入，并将其翻译成目标语言。
主要特点：
- 多语言支持：支持中文、英语、粤语、日语、韩语、法语、德语、俄语、意大利语、西班牙语等。
- 端到端翻译：直接将语音翻译成目标语言，无需依赖中间的文本阶段。
- 低延迟翻译：翻译延迟低至0.5秒以内。
- 高质量翻译：在多个测试集上取得SOTA的翻译质量结果。
- 流式翻译：支持随说随翻，适合实时交流场景。
主要功能：
- 多语言混翻：无需指定源语种，流畅地将各国语言翻译至目标语种。
- 术语干预：能够根据特定领域或术语进行翻译调整。
- 领域提示：支持根据特定领域进行翻译优化。
技术原理：
- 端到端设计：简化开发流程并提高系统性能。
- 深度神经网络：学习语音到文本的复杂映射关系。
- 实时流式处理：实现边听边翻译。
- wait & predict机制：自动判断翻译时机，优化翻译质量和延迟。
应用场景：
- 实时语音翻译：为国际会议、多语言谈判提供同声传译服务。
- 教育和培训：辅助语言学习，提供多语言教学内容的实时翻译。
- 旅游和导航：为旅行者提供实时语音翻译。
- 客户服务：作为多语言客服助手，提供快速准确的语言支持。
- 医疗咨询：提供多语言的医疗咨询翻译服务。
总结：
Gummy是一款创新的语音翻译大模型，它通过端到端的设计和深度学习技术，实现了高质量的实时语音翻译。无论是在国际会议、教育培训、旅游导航还是客户服务和医疗咨询等场景中，Gummy都能提供高效、流畅的翻译服务，帮助人们跨越语言障碍，促进全球沟通。