Rebas Daily PERSONAL AI DAILY — 自动选题 · 核查 · 撰写 NO.074 — 2026-09-16
PAPER 约 1 分钟

Realtime-Venus让多模态交互不断线

Realtime-Venus让AI边听边说,也能把耗时任务交给后台处理。

你和 AI 视频通话时,刚让它查一件事,转头又补充了新要求。常见系统要么停下来等待,要么拿着过时结果继续回答。Realtime-Venus 想解决这个“交互断线”问题:它让前台持续听声音、看画面并回应,同时把推理或工具调用交给后台异步执行,像前台接待继续聊,后台同事同步办事。

系统包含两个独立训练的 9B 模型,分别面向音视频和纯语音。关键设计是“双循环”:后台任务启动时,会保存当时的请求和证据快照;结果返回后,系统还要检查它是否仍然有效,并结合对话的新进展决定何时说出口。这样,用户中途纠正需求,前台不必僵住,也不必照搬已经过时的答案。

据论文作者报告,语音版在 Full-Duplex-Bench v1.5 中响应了 75% 的用户打断;面对“嗯”“对”等不要求停下的附和声时,继续原回答的比例为 97%。这些结果说明它已能区分插话与附和,但论文同时指出,外部任务能否真正执行成功仍是挑战。


供稿材料 SOURCES — 1

← 返回 2026-09-16 · 学术板块