具身记忆赛道持续升温,长记忆迎来新SOTA
IROS 2026 最佳论文启示录:没有长记忆的机器人,终将被淘汰。
作者丨 邓哲敏
编辑丨 齐铖湧
本月初在匹兹堡闭幕的 IROS 2026 将最佳论文奖颁给了 LT-Mem,这项研究让机器人重访同一空间时,能完整保留每个物体的位置变迁史,而非仅仅记住最新一次看到的样子。评委会从近两千篇收录论文中选中它,想必不仅是认可其扎实的工作,也是代表学界宣告: 具身长记忆(long-term embodied memory)已经从一个工程补丁,变成了机器人领域公认的科学问题。
从实际角度考虑,通用机器人要规模化落地,需要以小时、天乃至周为单位持续运行,而不只是几分钟。没有长记忆,每次相遇都是初次见面,机器人只是一个个孤立的单次动作执行器;有了长记忆,它才能从一次性工具变成可以长期上岗的同事。
但解决这件事远不是扩大上下文窗口那么简单:持续涌入的多模态数据既无法全部存储,也无法全部检索;现实世界还在不断变化,新的观察既不能简单覆盖旧的,也不能无序堆叠;更棘手的是,一条错误的记忆会在之后的决策里被反复调用,错误由此层层放大。记忆如何写入、如何留证、如何纠错,都是需要被正面回答的问题,靠调几个工程参数解决不了。
AI科技评论(雷峰网 (公众号:雷峰网) 公众号)注意到,在这一方向被顶会加冕的数月前,国内具身初创公司贝塔无限就已坐上牌桌。今年五月,贝塔的联合创始人陶帅在采访中明确表示: 长效、多模态、时空记忆的缺失 ,是他们首先要重点突破的方向。随后,团队陆续发布 BetaMem 全时空多模态记忆架构、世界动作模型 BetaWAM 0.1、首款机器人多米。10 月 20 日,团队把 BetaMem 的写入学习、证据管理和自我改进机制写成了系统的方法与实验,挂上 arXiv。
论文交出的成绩单颇为亮眼:BetaMem 采用 9B 开源模型生成记忆,在 M3-Bench-robot、LoCoMo、OpenEQA 和 EgoLifeQA 四项代表性记忆基准的对比评测中均取得 SOTA 成绩 。 尤其在串联多次观察中的线索、回忆长时间跨度的事件、识别个人习惯等任务上,BetaMem 展现出明显优势——这些能力,正是机器人进入生活、持续积累对人与环境的了解所需要的。
LT-Mem 从多会话建图切入,把问题收窄到干净、可评测;BetaMem 则从记忆如何形成、如何验证、如何从失败中学习的系统视角,搭建完整的记忆底座。一边是顶尖学术单点攻坚摘得顶会桂冠,一边是国内团队以产业落地为目标搭建完整记忆底座,学术和产业在此交汇,足以证明长记忆是整个领域正在收敛的核心方向判断。
01
记忆这道题,学界做到哪一步
围绕机器人长期记忆,学界探索了许多方法。按年份罗列意义不大,AI科技评论(雷峰网公众号)想换个角度,看记忆回答了什么问题,还剩什么没回答。
第一类关注 空间侧的记忆 ,也就是“这里有什么”。Hydra、ConceptGraphs 等三维场景图把物体、地点、房间组织成可被语言查询的关系网,Khronos 把时间引入动态环境建图,DynaMem 让移动操作机器人在物体被挪动后继续更新记忆,真机上对非静止物体的取放成功率平均达 70%,是静态系统的两倍以上。这一支空间关系清楚,但记住的主要是当下这一版世界长什么样。
第二类关注 检测类的记忆 ,也就是“我见过什么”。ReMEmbR 把长时导航视频建成可检索的时空记忆,供智能体推理。但检索按相似度排序,取回的是过去的信息。五分钟前桌上确实有杯子,现在还在不在呢?检索不负责回答。
第三类关注 变化侧的记忆 ,也就是“它变了没有”。LT-Mem 正是这一思路。论文把现有系统的毛病命名为“时间性失忆”:要么用新观测覆盖旧状态,要么存下语义快照却没有跨次访问一致的物体身份。它用一个随物体习性变化的易变性分数,决定新观察该覆盖、保持还是并存。作者也坦承局限:测试只覆盖两个室内加一个室外场景、各 10 次访问,外观相似物体的身份关联依然困难。
第四类关注 操作侧的记忆 ,也就是“我做到哪了”。MemoryVLA 指出主流 VLA 普遍忽视时序上下文,补上工作记忆与记忆库后,长时程任务真实成功率比最强基线高出 26 个百分点;MEM 用视频承载短时记忆、自然语言承载长时记忆,可跟踪长达十五分钟的任务,同时提醒,设计糟糕的记忆会因放大虚假相关而损害性能。
四支各答一问,拼在一起,仍然有三道题敞开。其一,空间侧与操作侧各自生长、很少碰头,前者可以跨周存在却不进入手的动作,后者进了动作但寿命以分钟计。其二,写什么、留什么、何时核对,多靠人工设计,文本 Agent 已用强化学习学会管理记忆,具身记忆还缺同等成熟的做法。其三,记忆能否追溯到证据?多数系统存的是描述,原始画面和声音在摘要之后就找不回来了。一条记录凭什么可信、出错后怎么复查,家庭场景里迟早被用户问到。
有意思的是,学界目前分散留下的这三大空白,贝塔无限的 BetaMem 方案给出了一套完整对应的解法。