字节跳动发布音全双工大模型SeedRealtime

发布时间:2026-08-05 20:43

  8月5日,字节跳动正式推出原生音全双工大模型 SeedRealtime。目前,SeedRealtime 已在豆包 App 全量上线,在业界率先实现了音全双工技术的规模化落地。

  作为走向全模态交互的关键一步,SeedRealtime 用统一架构原生融合音频、与文本,能在连续的多模态信息流上实时交互,带来“边看、边听、边说”的全新体验。它实现了以下三项核心突破:

  音联合理解:原生支持声音、画面与时序信息的深度融合。模型既能结合场景消解同音词歧义,也能准确理解

  主动的交互能力:具备持续的环境感知与主动表达能力。模型能在察觉画面状态变化时主动提醒,并能调用工具融入表达,让交互从被动响应升级为主动协作。

  流畅的交互节奏:能够实时感知用户的对话状态与交流节奏,在适当时机自然接话、停顿与回应;同时具备较强的抗干扰能力,能分辨旁人闲聊与背景噪声,不因干扰误触发,保持沟通的流畅连贯。

  字节跳动表示,端到端人工评测结果显示,相比级联模型,SeedRealtime 的音对话节奏问题减少了一半——模型对说话时机的把握更加自然,“话未说完被抢断、话音已落却回应迟缓、或是被背景杂音与闲聊误触发”等卡壳现象显著减少;同时,单次对话能够完整、顺畅交流的概率也有明显提升。

排行

精选