字节豆包大模型已支持实时语音通话
创始人
2024-08-09 18:21:04
IT 之家 8 月 9 日消息，字节跳动旗下火山引擎今日宣布推出对话式 AI 实时交互解决方案，搭载火山方舟大模型服务平台。
该方案通过火山引擎 RTC 实现语音数据的采集、处理和传输，并深度整合豆包・语音识别模型和豆包・语音合成模型，简化语音到文本和文本到语音的转换过程，提供智能对话和自然语言处理能力，帮助应用实现用户和云端大模型的实时语音通话。
▲对话式 AI 实时交互服务方案架构
字节跳动介绍称，对话式 AI 实时交互解决方案支持开箱即用快速搭建，只需调用标准的 OpenAPI 接口即可配置所需的语音识别（ASR）、大语音模型（LLM）、语音合成（TTS）类型和参数。而火山引擎 AIGC RTC-Server 负责边缘用户接入、云端资源调度、文本与语音转换处理以及数据订阅传输等环节。
该技术拥有三大亮点：
- 支持随时打断，甚至直接插话；
- 不受限于 AI 服务部署区域，整体响应延时可低至 1s；
- 客户端提供音频帧级别的语音活动性检测（VAD），可以检测出音频信号中何时有人正在说话，何时是静默状态。
IT 之家附火山引擎对话式 AI 实时交互 Demo 如下：
本网站信息内容及素材来源于网络采集或用户发布，如涉及侵权，请及时联系我们，发送链接至2697952338@QQ.COM，我们将第一时间进行核实与删除处理。
相关内容
热门资讯
柠檬订购APP平台订购白银输的...
柠檬订购APP平台订购白银输的不少钱亏损完了怎么退？亏的钱能够安全退回，2025年12月退费流程！投...
九方智投旗舰版29800能退吗...
九方智投旗舰版29800能退吗投顾虚假宣传揭秘!投顾收费套路内幕揭秘!维权已退!九方智投服务费是可以...
拇指订购APP是正规公司吗输的...
拇指订购APP是正规公司吗输的钱怎么要回来？不成功不收费维方法，5天维权流程公布！拇指订购APP、全...
海能投顾怎么退会员费?不仅没赚...
海能投顾怎么退会员费?不仅没赚反倒严重亏损!可以退费!海能投顾正规吗？海能投顾靠谱吗？海能投顾荐股频...
江西忠言金属取得铝合金压铸件打...
国家知识产权局信息显示，江西忠言金属科技有限公司取得一项名为“一种铝合金压铸件打磨装置”的专利，授权...
掌上生财APP炒贵金属亏的钱亏...
掌上生财APP炒贵金属亏的钱亏损的钱能退吗？可以依法追回亏损，2025年12月退费流程！投资有风险，...
利 多 星智投服务费怎么退？ ...
利 多 星智投服务费怎么退？ 夸大收益实则诱导交荐股费，留证可以追损！ 投资有风险，投资需谨慎！针...
国 诚投顾怎么样？ 交费被骗后...
国 诚投顾怎么样？ 交费被骗后悔不已,维权全额退款! 投资有风险，投资需谨慎！针对网上素未谋面的网...
湖南金证投顾老师荐股亏损会员费...
湖南金证投顾老师荐股亏损会员费可挽回，交费29800元打水漂，维权可退款!那些疯狂拉群洗脑的营销模式...
大阳智投26800， 交费被骗...
大阳智投26800， 交费被骗后悔不已,维权全额退款! 投资有风险，投资需谨慎！针对网上素未谋面的...