AI 新闻中心

AI 新闻中心 过去一年分析了 1378 篇文章,发现了 0 条重要报道 (分数 ≥ 5.5)
获取从可信来源聚合的最新 AI 新闻。

JoyAI-Echo-1.5 面向长时音视频故事与交互式世界生成

JoyAI-Echo-1.5 是一套面向长视频和交互式世界的音视频生成系统。长视频版本通过跨镜头记忆和从语音中提取的说话人信息,在多个场景中保持角色外观和声音身份的一致性。世界模型版本将导航输入转换为经过校准的六自由度摄像机轨迹,从而支持不同控制器和视角的交互。研究团队还将双向音视频骨干网络改造成因果式少步生成器,并利用模型自行生成的长短期 rollout 进行训练,以提高长时生成的效率和稳定性。

交接成本:LLM 智能体如何延续非原生轨迹

一项研究分析了在长期编程任务中,于低成本、低能力模型与高成本、高能力模型之间切换的影响。接收模型必须延续另一个模型生成的任务轨迹,包括工具使用和代码修改。对 Claude 和 GPT 模型组合的测试显示,切换到更强模型时,即使传递完整轨迹,也只能弥补不到一半的能力差距,同时带来显著的成本溢价。相比之下,切换到更便宜的模型能实现更有利的成本与质量平衡。最佳的轨迹信息量也取决于切换方向。

作为自演化 UI-to-Code 生成视觉修复上下文的评分类目

大型视觉语言模型在将用户界面转换为代码方面取得了进展,但其测试时的迭代式自我改进仍不稳定。RubSE 框架利用结构化评分类目,将视觉反馈转化为范围明确的修复目标。每轮迭代选择一个优先目标,并保存此前目标的历史记录,从而减少重复或过于宽泛的修改。在六个视觉语言模型和三个 UI-to-Code 基准上的评估表明,RubSE 比朴素的自演化方法产生了更稳定的优化轨迹和更好的结果,并提升了从严重视觉回归中

Video-IFBench评估多模态大语言模型在视频理解中的指令遵循能力

该研究提出Video-IFBench,用于评估多模态大语言模型在视频理解过程中遵循指令的能力。基准包含1500个样本、32种任务类型,以及涵盖语义和格式要求的39类约束。研究人员测试了20多个近期模型,结果显示,当前模型在处理包含大量约束、语义要求,或需要根据视频和音频内容选择正确条件分支的复杂指令时,仍然面临明显困难。

门控循环 Transformer 通过循环调制提升表达能力

一项研究提出了 Gated Recurrent Transformer,通过反复执行共享的 Transformer 核心,并利用更新门调节每次循环。该方法旨在减少每层使用独立参数的需求,同时保留深层模型的功能多样性。在相同计算量下,三层模型达到了与 12 层 GPT-2 Small 基线相当的准确率。在参数和数据预算相同的情况下,更深的循环结构取得了 2.76 的验证损失,优于非循环模型的 2.8

WarpSAC:重新思考探索与利用,推动可扩展离策略强化学习

WarpSAC研究大规模并行仿真如何改变离策略强化学习的训练方式。在八类基准测试中开展的受控实验表明,参数归一化和截断双Q等常见稳定化方法高度依赖数据规模。该方法根据数据环境调整稳定化策略,并按经验的新旧程度对回放数据加权。与FlashSAC相比,WarpSAC在九个CPU规模环境中的归一化得分—步数AUC提升4.5%,在14个GPU并行环境中提升23.1%。在Unitree G1运输任务中,成功

VoiceMem:面向实时交互的流式“双脑”记忆架构

VoiceMem 是一种面向对话式语音系统的记忆架构,将并行的信息记忆“左脑”与情感记忆“右脑”结合,并支持流式记忆输入与输出。研究团队还构建了支持记忆的 SLM 训练流程、长期对话评测,以及采用可替换记忆后端的解耦部署方案。实验显示,在基于 top-200 结果的 top-5 检索评测中,信息记忆部分比 Mem0 等系统高出近 30 分;情感记忆部分在三个角色人格基准测试中达到领先水平,综合得分

MA-VLA:面向多机械臂协作的视觉语言动作模型

MA-VLA是一种用于多机械臂协同操作的视觉语言动作模型。它将协作行为分解为原子动作,分配给不同机械臂,并支持在新任务中重新组合这些动作。其“Arm Shuffle”训练方法会置换各机械臂的观测、状态和分配动作,从而减少对固定角色的依赖。在包含训练阶段未出现的协作模式的基准测试中,现有先进VLA模型大多失败,而MA-VLA在仿真和真实环境评估中均表现稳定。研究团队已公开代码、模型和数据。

StreamPI:面向视觉-语言-动作模型的流式多模态时序建模

StreamPI在不增加额外参数的情况下,为基于单帧的视觉-语言-动作模型加入时序推理能力,用于机器人操作。该方法将每组视觉观测和语言指令视为一个时序单元,在单元内部使用双向注意力进行跨模态融合,在单元之间使用因果注意力支持流式推理。通过采用随机帧间隔训练,系统旨在缩小同步训练与真实机器人异步部署之间的差距。StreamPI可以继承预训练单帧模型的权重,并支持单帧和多帧推理。在真实机器人任务和LI

V-Rubrics:通过基于评分标准的强化学习提升视觉忠实度

V-Rubrics针对视觉语言模型后训练中的信用分配问题提出了一种方法:模型生成的回答可能语言流畅,却包含缺乏视觉证据支持的说法或错误的推理步骤。该方法将参考回答拆分为原子命题,并从视觉忠实度、推理一致性和指令遵循三个方面评估生成回答。研究团队从17个具有视觉依据的数据源构建了V-Rubrics 50K数据集,共包含50,248个样本,并以Qwen3-VL-8B-Instruct为基础模型,使用按

JIT-Agent 通过即时演化代理框架扩展智能体能力

JIT-Agent 是一种为大型语言模型智能体设计的模型,可即时生成适应具体任务的代理框架。该框架负责记忆管理、规划、行动协议,以及工具和技能的编排。JIT-Agent 能根据任务定制框架,为提升执行稳定性进行修复,并利用过往配置的性能信号持续自我演化。根据论文公布的评测结果,JIT-Agent 显著提升了多个模型系列的表现,并使 DeepSeek-V4-Flash 在部分基准测试中超过 GPT-

D^3-MOPD:面向高效多教师蒸馏的自适应动态领域调度

D^3-MOPD 是一种用于 on-policy 蒸馏的调度器,可将多个领域专家教师模型的知识整合到一个学生模型中。与训练前固定各领域数据比例的方法不同,它会跟踪每个领域的反向 KL 散度变化,并根据剩余提升空间和当前改进速度动态调整采样比例。一个异步监控进程负责执行调度,不会改变核心训练循环。在使用 Qwen3.6-35B-A3B 学生模型和四个领域专家教师模型的实验中,作者报告称,D^3-MO

Android GUI 智能体能否抵御运行时异常?AnTrap 评估动态对抗环境中的智能体

该研究提出 AnTrap 基准,用于评估 Android GUI 智能体应对动态运行时异常的鲁棒性,例如意外弹窗和错误操作。AnTrap 将现实世界的异常划分为状态、思考、行动和轮次四个层级、十个细分类别,并在保持任务可完成性的同时注入逼真的扰动。对 16 个主流 GUI 模型的评估显示,所有模型都容易受到动态异常影响,性能也显著下降。对抗性强化学习能够改善部分单步状态和行动陷阱,但状态死锁等深层