GPT-4o语音版？这个AI不仅能听会说，还会说唱、演戏、讲段子。

它就是由复旦大学计算机学院开发的 SpeechGPT2，一个 能感知和表达情感的端到端语音对话语言模型。

说唱、戏剧、机器人、搞笑、低语…… SpeechGPT2 就像一个全能声优，能根据你的指令和上下文，用各种风格的语音和你聊天。

想象一下，用说唱的语气和你讨论诗歌，是不是很有趣？

为了处理复杂的语音信息，SpeechGPT2 可是下了一番功夫。它采用了一种超低比特率的语音编解码器 (750bps)，能同时处理语义和声学信息，就好像给声音加了一个“翻译器”，让AI能够理解你的意思。

更厉害的是，SpeechGPT2 的预训练数据 超过10万小时 ，涵盖了各种场景和风格的语音，保证它能听得懂你说的话，还能用你喜欢的风格和你聊天。

不过，SpeechGPT2 目前还处于开发阶段，在语音理解的抗噪性和语音生成的稳定性方面还需要进一步提升。

SpeechGPT2 到底有多强大？

项目地址 ：https://0nutation.github.io/SpeechGPT2.github.io/

ITPub博客