OpenAI 于 7 月 9 日推出了 GPT-Live 系列模型,该系列被定位为新一代全双工语音模型,能够同步进行聆听和回应,从而显著提升 AI 对话的真实感。
目前,GPT-Live 系列提供了 GPT-Live-1 和 GPT-Live-1 mini 两个版本。即日起,全球 ChatGPT 用户均可使用,其中 GPT-Live-1 模型面向 Go、Plus 和 Pro 订阅用户开放,而免费用户则可体验 GPT-Live-1 mini 模型。
在技术架构上,GPT-Live 系列采用了全双工设计,打破了传统单轮对话结束后再响应的模式。它能够实时处理输入和输出信息,并能“每秒多次”地决定何时说话、继续倾听、暂停、打断或调用外部工具,以此来模拟更接近真人间的对话体验。
在处理复杂任务时,GPT-Live 系列模型能够将连续交互和深度推理进行分拆处理。模型一方面在前台维持语音对话的流畅进行,另一方面则将网页搜索、复杂推理或更高级的任务交由 GPT-5.5 系列模型在后台处理。具体来说:
OpenAI 方面表示,为评估新模型性能,公司特别建立了一套新的人工评测体系,重点关注语音交流中的舒适度和整体流畅性。在针对时长为 5-10 分钟的配对对话进行的评估中,GPT-Live-1 和 GPT-Live-1 mini 模型在整体偏好、轮次衔接、打断情况、对话流畅度与自然度等指标上,均获得了比此前 Advanced Voice Mode 更高的评分。
OpenAI 透露,目前每周有超过 1.5 亿用户通过 Voice 和 Dictation 等功能与 ChatGPT 进行语音互动,这些应用场景涵盖了免提日常辅助、语言学习、睡前故事以及通勤期间的闲聊等。新版本还增加了在语音对话中展示天气、股票、体育等可视化卡片的功能,并继续支持搜索、记忆、图片和文件上传等功能。
在安全性方面,OpenAI 称 GPT-Live 模型在自残、精神病性症状与躁狂、对 AI 的情感依赖、暴力及性内容等多个领域,经过了原生音频评测、合成音频评测以及内部红队测试。官方表示,该模型在几乎所有评估维度上均达到了与 Advanced Voice Mode 相当或更优的水平。