跳转到主内容
数工科技DIGIT·CN
模型与软件讯飞开放平台

讯飞开放语音大模型 Spark-Audio 1.0,支持 99 个语种

科大讯飞 11 月 12 日上线语音大模型 Spark-Audio 1.0 接口,可处理 99 个语种的语音并返回文字,另覆盖 202 种方言。同一接口还能辨认方言、区分说话人并判断情绪。

讯飞开放语音大模型 Spark-Audio 1.0,支持 99 个语种
支持语种
99 个
支持方言
202 种
单次上传上限
300 秒
单次会话累计上限
1,800 秒

科大讯飞 11 月 12 日向开发者开放语音大模型 Spark-Audio 1.0 的调用。文字、语音,或两者一起,都可以作为输入,返回的只有文字。覆盖 99 个语种和 202 种方言。

这套接口能把语音转成文字,也能做翻译、辨认方言。同一接口还能识别环境声音、区分不同说话人、判断情绪,并回答针对一段录音的提问。讯飞称,训练使用全国产算力。

传输使用 WebSocket,也就是一条保持打开的双向连接,支持单声道 PCM 或 WAV 音频。每次上传最长 300 秒;同一次会话加起来不超过 1,800 秒,也就是 30 分钟。

模型不会自己判断一句话说完了没有。音频传完后,调用方要再发一条提交指令,模型才开始处理。如果要同时附上文字(比如针对录音的提问),文字必须放在这一轮请求的最开头,一次发完。

讯飞称,以往先把语音转成文字再交给大模型,语气、情绪和环境音会在这一步丢失,Spark-Audio 1.0 改为直接理解语音。对开发者来说,转文字、翻译、说话人区分和情绪判断可以在同一个接口里完成,不必再分别对接几种语音服务。

TAGS#科大讯飞#SparkAudio#语音#大模型