腾讯发布Hy-SimulMT-30B-A3B：实时双向中英语音翻译模型

摘要：腾讯Hunyuan团队发布了一款名为Hy-SimulMT-30B-A3B的实时双向中英语音翻译模型。该模型支持实时语音转语音翻译，保留说话人的声音特征，并提供准确的信息传递。其StreamLAAL延迟约为3秒，显著低于同类系统；GEMBA评分也超过大多数开源模型和部分商业API。Hy-SimulMT旨在优化会议、演讲和采访等场景下的沟通效率，减少因翻译延迟带来的干扰。

---

技术架构与核心机制

Hy-SimulMT-30B-A3B由腾讯Hunyuan团队开发，是一款基于Transformer架构的实时双向中英语音翻译模型。其核心特点包括：

1. 实时语音处理：模型能够持续接收音频输入，并在说话人讲话的同时进行翻译，输出翻译后的文本和语音。
2. 声音克隆：通过实时声音克隆技术，模型能够保留说话人的声音特征，确保翻译后的语音与原声在音色、语调等方面的一致性。
3. 低延迟：在RealSI长音频评估中，Hy-SimulMT的StreamLAAL延迟约为3秒，显著低于同类系统。
4. 高翻译质量：GEMBA评分显示，该模型的翻译质量超过大多数开源模型和部分商业API。

工程权衡与实测表现

• 延迟与质量的平衡：Hy-SimulMT在延迟和翻译质量之间取得了良好平衡。其低延迟特性使其适用于实时通信场景，但为了实现这一点，模型在某些复杂句子的翻译精度上可能有所妥协。
• 计算资源需求：实时语音翻译对计算资源的需求较高，尤其是在处理长音频流时。腾讯表示，Hy-SimulMT在GPU加速下能够高效运行，但具体硬件配置要求尚未公开。
• 评测环境：RealSI评估使用了真实世界的音频数据，并结合专业同声传译的表现进行对比，评测结果具有较高的可信度。

开发者落地与部署建议

• 应用场景：Hy-SimulMT适用于会议、演讲、采访等需要实时翻译的场景。开发者可以利用SimulInfer推理服务和SimulTrain训练工具进行模型部署和微调。
• TTS服务集成：语音输出和声音克隆需要配置TTS服务，开发者可以选择开源或商业TTS解决方案进行集成。
• Hy Translate App：开发者可以在Hy Translate App中试用Hy-SimulMT，以快速了解其功能和应用效果。

未来展望

Hy-SimulMT的发布标志着腾讯在实时语音翻译领域的重大进展。未来，腾讯可能会进一步优化模型性能，并扩展其支持的语种和场景。此外，随着AI技术的不断发展，实时语音翻译的应用场景将更加广泛，Hy-SimulMT有望在更多领域发挥重要作用。

---

消息来源：Reddit r/LocalLLaMA (2026-10-26)

—— 完 ——

主题标签： #Tencent 关注 #实时翻译 关注 #语音克隆 关注 #AI模型 关注 #多模态 关注