球盟会 - 蚂蚁百灵推出五款开源语音模型 完整覆盖语音处理全流程
10月20日,蚂蚁百灵正式发布了Ming-3.0语音系列,令人兴奋的是,不仅仅是一款模型,而是整整五款,各自在语音合成、音频理解与对话、语音识别三个领域各显身手。开发者们可以根据具体需求挑选单一模型,或者将不同功能整合到自己的应用流程中,以提升工作效率。
首先,聚焦在语音合成这一业务线。Ming-3.0-tts系列中的Voice Design功能让使用者能够通过文字描绘所需的音色,或是通过参考音频来调节音调。此外,导向模式的引入更为创作者打开了一扇新的大门,允许他们设定台词的表现风格,详细描述情感变化、重音词汇及节奏把控。配音的形式从过去的单纯选择声音转变为如今的指令式创作。这样一套解决方案不仅仅是理论上的设想,在蚂蚁内部的多个业务场景中,Ming-3.0-tts已经得到了广泛应用,诸如阿福App的主对话和语音通话,医生音色克隆,以及小虎智能办公等领域均受益于其强大的配音能力。更妙的是,这些功能能够与Ming-3.0-asr-tiny相结合,有效衔接语音输入与回答播报两个环节。
而在音频理解方面,Ming-3.0-audio-flash和tiny版本具备了直接对长篇音频进行转写、总结及观点分析的能力。这一系列复杂的理解任务能够实现结构化输出,相较于过去传统的“逐字识别后再分析”方式,Ming-3.0在保留对话中的情绪、说话人身份及环境信息等多维度信息上展现出了显著优势。虽然这需要模型对长上下文序列进行快速推理,但其优秀的性能足以令人赞叹。 球盟会
再来看语音识别部分,Ming-3.0-asr-tiny的创新在于,构建了涵盖普通话、英语、方言及行业热词的高质量语料库,同时对其分布进行了科学控制。通过整合上下文理解能力和候选热词列表,Ming-3.0显著提升了真实场景下的识别效果。这一模型在蚂蚁内部的应用也相当广泛,包括阿福医生助手、支付宝搜索、蚁小保实时语音对话以及安全核身等多个场景,充分展现了其灵活性与高效性。
对开发者而言,现成的接入入口已经全面开放:在线体验可以通过ling.tbox.cn获取,音频理解与对话功能可在Ling Studio Chat中使用Ming-3.0-audio-flash API进行调用。此外,开发者们还可通过Hugging Face与ModelScope获得Ming-3.0系列的权重下载,包括Ming-3.0-tts-0.5B、Ming-3.0-tts-tiny、Ming-3.0-audio-flash、Ming-3.0-audio-tiny和Ming-3.0-asr-tiny等五款模型的API服务。这意味着,从语音合成到理解再到识别,整条语音处理链路的每个环节现在都有开源选项可供尝试,极大地丰富了开发者的选择与应用可能性。
觉得有用?分享给朋友
让更多人看到这篇内容




