一、对讲机与电话的本质差异
早期语音助手采用半双工模式:用户说完,AI再回答,类似对讲机,时间轴严格交替。而人类通话是全双工的:支持随时开口、边听边说、抢话附和。
实现从半双工到全双工的跨越,需解决三大难题:话轮转换(判断停顿是结束还是喘息)、打断与附和(区分有效打断与无效噪音)、副语言理解(识别语气背后的情绪)。工程核心指标在于延迟:应答超过0.5秒,用户体验即显著下降。
二、鉴别真伪全双工的三个标准
根据2025年9月发布的全双工口语模型综述(arXiv:2509.14515),真正的全双工系统必须同时满足三点:边说边听、允许语音重叠、随时可被打断。据此可将技术路线分为“工程同步”与“学习式同步”两类。
2026年EMNLP实证审计显示,部分宣称全双工的系统在多轮对话实测中表现不佳,尤其是基于状态机的方案。全双工并非二元开关,而是一个光谱:
三、八大技术路线解析
现有技术路线主要围绕同步机制、中间表示及智能分配进行取舍,可分为四组:
1.以可控性换延迟:信号级联与决策耳
信号级联是传统方案(如Google Duplex及多数呼叫中心IVR):通过VAD检测静音、ASR转写、LLM推理、TTS合成。优点是可控、可审计、模块灵活替换;缺点是延迟累加,且转写过程丢失语气信息。
决策耳是其进化版:不生成完整文本,直接预测动作概率。开源项目DuplexJev在此领域表现优异,单张H200显卡上响应速度极快,且通过声学特征连接器大幅提升了情绪识别准确率。其核心优势在于将复杂的话轮同步问题转化为低成本的闭集标注问题。
2.以稳定性换真双工:状态机控制
Freeze-Omni、VITA-1.5及阿里MinMo等采用“听/想/说”三态控制器,实现毫秒级状态切换。此类方案稳定、节省资源且保留文本智力,适合工业落地。但其在发声时通常停止监听,实质上属于准全双工,也是此前审计中“翻车”较多的类型。
3.以自然度换黑盒:原生多流与文本锚定
原生多流(如Meta dGSLM、Kyutai Moshi)通过并行处理音频流及内部独白,天然具备重叠与插话能力,首包延迟约200毫秒。但面临同步数据稀缺、算力成本高及缺乏文本中间层难以审计的问题。
工程界的折中方案包括:文本锚定(如GLM-4-Voice、Qwen-Omni),实行脑嘴分离,保留智力继承与可追溯性;以及时间切片(如DuplexOmni),通过固定时间切片维持对话流畅度,接话率表现优异。
4.以分工换延迟:Live网关与表现力增强
Live网关是一种部署形态:前端负责语音交互,后端云端负责智能处理(如OpenAI Realtime、Sophon-Realtime)。优势在于后端模型可灵活更换,劣势在于增加网络跳数延迟。
表现力共情聚焦于“怎么说”,通过韵律驱动或标签化TTS(如Hume EVI、CosyVoice 3、ElevenLabs v3)模拟笑声、叹气等副语言,提升拟人感。
四、场景化选型建议
|
|
|
|
|---|---|---|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
选型建议参考第三方基准测试,如学术侧Full-Duplex-Bench(涵盖时序动态、行为仲裁等维度)及工程侧LiveKit eot-bench,避免仅依赖厂商宣传。
五、未来趋势:分层架构融合
当前八派技术正趋向收敛为分层栈架构:耳朵负责快决策,嘴负责表现力,脑负责慢推理。
结合决策耳的快速响应、标签TTS的情感表达及文本大模型的推理能力,已成为量产原型的主流方向。随着技术融合,最终评判标准将回归体验本身:当用户无法分辨通话对面是人还是AI时,全双工技术才算真正成熟。

