我要评论最新发布开源语音大模型项目funaudiollm，而且一次包含两个模型：sensevoice和cosyvoice。
sensevoice专注高精度多语言语音识别、情感辨识和音频事件检测，支持超过50种语言识别，效果优于whisper模型，中文与粤语提升50%以上。
且情感识别能力强，支持音乐、掌声、笑声、哭声、咳嗽、喷嚏等多种常见人机交互事件检测，多方面测试拿下sota。
cosyvoice则专注自然语音生成，支持多语言、音色和情感控制，支持中英日粤韩5种语言的生成，效果显著优于传统语音生成模型。
仅需要3~10s的原始音频，cosyvoice即可生成模拟音色，甚至包括韵律、情感等细节，包括跨语种语音生成。
而且cosyvoice支持以富文本或自然语言的形式，对生成语音的情感、韵律进行细粒度的控制，生音频在情感表现力上得到明显提升。
一、项目体验
可以直接在网页上进行体验，无需对环境进行任何安装等等，很方便。
cosyvoice在线体验：https://www.modelscope.cn/studios/iic/cosyvoice-300m
sensevoice在线体验：https://www.modelscope.cn/studios/iic/sensevoice
![k8s初始化报错 [ERROR CRI]: container runtime is not running: ......](https://images.3wcode.com/3wcode/20240802/s_0_202408022353576569.png)
发表评论