realtime·general

real-time

别名
首次出现
2026-05-22
最近出现
2026-07-31
累计提及
184
§ 01综述

实时(real-time)技术指系统在极短时间内(通常毫秒级)完成数据采集、处理与响应,在AI领域,实时语音、视频和翻译模型正成为各大厂商竞争的核心方向。近期,OpenAI、阿里巴巴和开源社区密集发布了多款低延迟多模态模型,将实时交互能力推向新高度。

实时语音与视频模型近期进展

2026年7月,阿里发布Qwen-Audio-3.0-Realtime,升级了四项实时语音功能,声称在理解准确性和响应速度上显著提升(量子位);同月,阿里还升级了Fun-ASR-Realtime,单模型支持30种语言和16种方言(IT之家)。

OpenAI在7月推出Realtime 2.1系列,包括GPT-Realtime-2.1和GPT-Realtime-2.1-mini,p95延迟降低至少25%,并支持推理与工具调用(IT之家@OpenAIDevs)。

开源方面,OpenMOSS发布了MOSS-VL-Realtime,这是一个实时视频流多模态模型,可在视频帧流中实现低延迟交互(@berryxia)。

当前焦点与观察点

当前实时AI模型的焦点集中在三方面:一是延迟优化,如OpenAI将p95延迟降低25%,阿里通过模型架构改进实现更快的语音响应;二是多模态融合,从纯语音扩展到视频流和推理能力,如MOSS-VL-Realtime;三是语言覆盖与翻译精度,Gradium发布的实时翻译模型(stt-translate和s2s-translate)声称在准确率和延迟上超越GPT实时翻译(marktechpost)。

争议点在于:开源模型与商业API的差距在缩小,但实时场景下的稳定性和成本仍是挑战。此外,实时交互的隐私与安全规范尚未成熟,如何平衡用户体验与数据保护是未来关键。

§ 02相关报道10 条在档
  1. 01
    ObjectStream:以潜在目标为记忆锚点的流式视频理解
    arXiv cs.AI
  2. 02
    avatarin 用 GPT-Realtime 为山田电机打造 24/7 零售智能体
    OpenAI Blog
  3. 03
    阿里云 Qoder 上线实时语音交互智能体 QoderVoice
    IT之家
  4. 04
    Codex Realtime Voice Mode 将升级为全面个人助手
    歸藏(guizang.ai)
  5. 05
    LangSmith 原生集成四大语音框架追踪,让语音 agent 不再黑盒
    Harrison Chase
  6. 06
    LangSmith 为语音代理新增全音频追踪,支持 Pipecat、LiveKit 等框架
    LangChain
  7. 07
    LangSmith 为 4 个语音框架推出生产追踪功能
    LangChain
  8. 08
    用Patter SDK构建餐厅预订语音代理:动态变量、护栏、延迟仪表盘与评估检查
    marktechpost
  9. 09
    又快又聪明,阿里发布Qwen-Audio-3.0-Realtime:实时语音大模型四项功能升级
    量子位
  10. 10
    阿里发布实时语音交互对话模型Qwen-Audio-3.0-Realtime,声称更聪明
    IT之家
§ 03邻近话题

本页综述由 AITOP 基于公开报道整理。原报道版权归各自来源所有。

/topic/real-time