跳到正文
IT之家 AI·· 16 天前评分70

腾讯混元同声传译大模型 Hy-SimulMT 开源,响应时间仅 3 秒超人类译员

摘要

IT之家 10 月 26 日消息,腾讯混元同声传译大模型 Hy-SimulMT 今日发布并开源,具备低时延、高准确率的特点,支持中英语言之间语音到语音实时翻译 —— 说话人的音频可以实时输入到 Hy-SimulMT 模型中,模型会边听边译,实时给出译文和语音,并支持实时音色克隆,可以高度还原说话人声音和语气。该模型在腾讯 Hy 翻译 App 首发, 免费提供服务体验 。 IT之家从官方介绍获悉,低时延是模型的一大亮点,混元同声传译大模型 Hy-SimulMT 的响应时间 实测在 3 秒左右 ,人类专业译员平均水平在 4-5 秒。测评结果显示,该模型的翻译效果超过了市面上主流的开源同传模型,甚至超过大部分的商用同传 API。 官方称,在业界常用的长音频开源评测集 RealSI 上,Hy-SimulMT 展示出了较好的同传翻译效果,见下图: 横轴里的 StreamLAAL 表示同传翻译的延迟指标,反映的模型输出翻译结果相比输入音频的...

推荐理由

来自IT之家 AI的《腾讯混元同声传译大模型 Hy-SimulMT 开源,响应时间仅 3 秒超人类译员》。重点看模型能力与工程、评测与基准、开源生态。摘要提到:IT之家 10 月 26 日消息,腾讯混元同声传译大模型 Hy-SimulMT 今日发布并开源,具备低时延、高准确率的特点,支持中英语言之间语音到语音实时翻译 —— 说话人的音频可以实时输入到 Hy-SimulMT 模型中,模型会边听边译,实时给出译文和语音,并支持实时音色克隆,可以高度还原说话人声音和语气。该模型在腾讯 Hy 翻译 App 首发, 免费提供服务体验 。 IT之家从官方介绍获悉,低时延是模型的一大亮点,混元同声传译大模型 Hy-SimulMT 的响应时间 实测在 3 秒左右 ,人类专业译员平均水平在 4-5 秒。测评结果显示,该模型的翻译效果超过了市面上主流的开源同传模型,甚至超过大部分的商用同传 API。 官方称,在业界常用的长音频开源评测集 RealSI 上,Hy-SimulMT 展示出了较好的同传翻译效果,见下图: 横轴里的 StreamLAAL 表示同传翻译的延迟指标,反映的模型输出翻译结果相比输入音频的...

本站只提供摘要与原文入口。完整内容请阅读原文。

来源:IT之家 AI · ithome.com