腾讯混元上线实时同声传译模型 Hy-SimulMT,已开源并接入 Hy 翻译 App
腾讯上线SimulMT,一个实时同声传译产品
- 1腾讯混元团队上线并开源实时同声传译大模型 Hy-SimulMT,支持中英双向语音到语音翻译
- 2官方称对比持 CATTI 一级/二级口译证书的真人口译,质量达专家水平且速度往往更快
- 3模型已开源可自行部署,并接入腾讯 Hy 翻译 App 同传入口,可免费直接使用
- 4同传过程支持实时克隆说话人音色,Hy 翻译 App 支持 30 多种语言互译并覆盖多种方言
实时同传正被做成免费消费级功能并开源,跨语言沟通的门槛从专业译员和会议服务转向普通 App。
- 影响:中英会议、客服等涉外沟通场景可直接用免费 App 获得实时双语能力;开源模型让有数据顾虑的团队多了自部署选项;质量与速度优势目前只有官方口径。
- 参考:可考虑安排涉外业务同事用 Hy 翻译 App 的同传入口实测真实会议效果;对数据敏感场景,值得评估 GitHub 开源仓库的自部署与定制成本。
- 依据:质量比肩 CATTI 持证口译、榜单表现为官方口径,暂无独立验证;App 内同传入口与音色克隆为作者上手描述。
Hy-SimulMT 支持中英双向语音到语音翻译,主打低延迟、高质量和实时克隆音色,已开源并接入腾讯 Hy 翻译 App。与持有 CATTI 证书的真人口译对比,质量能达到专家水平,速度往往更快。

腾讯又上线并开源了一个新产品,Hy-SimulMT 大模型。

这是一个实时同声传译大模型,由腾讯混元团队推出。
支持中文和英文之间的,双向语音到语音翻译。


这个产品,主要特征是低延迟、高质量、实时同声翻译、实时克隆音色。
榜单测评表现优异,越是在左上角,表现越好。

和真人口译对比中,翻译的质量能达到人类专家水平(持有CATTI 一级/二级口译证书),但速度往往更快。

从榜单测评和真人测评看,表现确实很优。
这个大模型,目前已开源,你可以自己部署使用。
https://github.com/Tencent-Hunyuan/Hy-SimulMT/blob/main/README.zh-CN.md
同时,这个大模型,腾讯混元也直接上线到了腾讯 Hy 翻译 APP 中。
可直接使用。
下载腾讯Hy 翻译 APP,启动进入首页后,底部有个「同传」入口。
点击「开始」,即可启动同声翻译。可以中译英。
也可以英译中。
比较有意思的是,实时传译为中文或英文过程中,居然支持音色实时克隆。
也就是同声翻译过程中,能保留说话人的声音特点。
比如这声音是小朋友的声音,同声翻译时的发声,实时克隆小朋友的声音。
这有点厉害。
使用腾讯 Hy 翻译APP在同声传译过程中,也支持设置展现方式和字号大小。
在使用 Hy 同声翻译过程中,还可以让 AI 助理小Hy 进行分析或总结。
腾讯 Hy 翻译,是腾讯混元团队,基于混元翻译模型打造的 AI 翻译APP。
支持30多种语言互译,并且覆盖多种方言。
现在,该产品中加入了同传翻译。
边说边译,实时看字幕,实时听译文。
还能精准复刻音色。
使用过程中,确实发现挺好用。
而这个功能,就是腾讯最新开源模型 Hy-SimulMT 提供的。
关键是,还免费。
本文由作者【三哥】,微信公众号:【产品笔记】,原创/授权 发布于平台,未经许可,禁止转载。
题图来自Unsplash,基于 CC0 协议。
来源:人人都是产品经理 · woshipm.com