rick awsb ($people, $people)|2026年07月17日 00:53
RoboTTT:机器人的递归自我迭代的开始??
要想让 AI 的“记性”更好,就需要给它塞入更大的内存条。
对具身智能来说,这比llm更难,因为机器人需要记住的数据,比llm还多了一个时间维度,很多情况下,存储需求提升了一个数量级。
而在实时性要求极高的具身智能环境中,又很多时候需要依靠本地存储。
这就形成了具身智能记性提升的两难
近期,由 NVIDIA GEAR 实验室、斯坦福大学和德克萨斯大学奥斯汀分校联合发表的重磅研究 RoboTTT(Test-Time-Training Robot Policies),为解决这个问题提供了一个全新的尝试。
它不仅将机器人策略的上下文长度原生扩展到了 8,000 个时间步(约 5 分钟),还首次向世人展现出一条清晰且无饱和迹象的 上下文缩放曲线(Context Scaling Curve)。
正如论文作者 Jim Fan 所言:“LLM 能享受的上下文缩放,机器人也应该享受。”这一突破不禁让人深思:如果把上下文推到 100 万时间步(约 9–10 小时),机器人会进化到什么程度?它能否真正实现“终身学习”实现全生命周期的递归自我迭代?
1. 核心突破:告别“死记硬背”,走向“以算代存”
传统 Transformer 架构依赖庞大的键值缓存(KV Cache)来记住历史,上下文越长,显存占用呈爆炸式增长。RoboTTT 摒弃了这种“空间换时间”的死板机制,其核心创新在于引入了 测试时训练(Test-Time Training, TTT)。
RoboTTT 在模型内部嵌入了一个微型模型(Tiny Core)。它的运行逻辑是:
实时梯度更新:每接收到一个传感器读数(如新的视觉帧),系统就会对这个微型核心进行一次梯度更新。
压缩为快速权重:历史交互信息被持续压缩并内化进快速权重(Fast Weights)中。
恒定推理成本:由于隐状态大小固定,无论机器人工作了 5 分钟还是 10 个小时,其显存占用和推理成本几乎恒定,完美打破了长序列输入的“内存墙”。
这种“以算代存”的底层逻辑,让机器人能够把任意长的经验实时内化,为部署后的持续学习奠定了坚实的架构基础。
2. 从 8K 到 100 万:涌现的“终身学习”能力
目前,8,000 步(5 分钟)的上下文已经让 RoboTTT 展现出闭环控制能力的大幅提升,其整体性能比短上下文基线提升了 57%–87%,并解锁了三大新能力:
完整执行长流程:能够完成 10 阶段、耗时 5 分钟的复杂双臂装配任务。
单样本模仿:仅看一次人类演示未见过的配置,就能忠实执行。
实时自我修复:中途出错或遭到物理干扰,能自主退回并纠正。
那么,如果上下文扩展到 100 万(9+ 小时),机器人将迎来怎样的质变?
8K 的记忆容量适合单次长任务,新任务容易覆盖旧经验。而 100 万上下文则提供了庞大的“记忆带宽”,使其真正迈向终身学习:
小时级甚至跨天任务--能够脱离碎片化的单步指令,自主完成整条装配线的多阶段宏大流程。
真正的终身记忆与肌肉记忆--可以同时容纳几天甚至更久的交互历史,随着环境的长期磨合,形成高度个性化的操作习惯。
持续自我进化--每次新观察都在与全部历史经验共同优化同一个快速权重。这形成了一个正反馈循环:越丰富的长期记忆 $\rightarrow$ 越好的决策 $\rightarrow$ 产生更高质量的新数据 $\rightarrow$ 进一步优化自己。部署后越用越聪明。
接近人类级物理智能--和现在的llm不断强调独立自主任务时长就是智能等级,并决定人类任务替代一样,在时间尺度上,机器人将逼近人类处理长期物理经验、在物理世界中总结因果关系的能力。
3. 具身智能scaling的开端:100 万上下文的方向及工程瓶颈
尽管架构上的算力与内存痛点已被 TTT 机制缓解,但扩展到 100 万上下文仍存工程障碍。
主要是在物理世界中收集长达数小时的真实运行(Rollout)数据,伴随着极高的人力、时间、硬件损耗与安全风险成本。
当然,以目前各种数据标注公司和创新的标注方法来说,这并不存在不可逾越的鸿沟。
结语
RoboTTT 不仅是一次精妙的技术突破,更标志着机器人领域正式迎来了属于自己的“上下文缩放时代”。从 8K 迈向 100 万,将是机器人具身智能的量变到质变。
当系统不再是在每次任务结束后清空记忆,而是像人类一样,将一生的物理交互经验持续提炼、积累并内化为直觉。那一刻,我们将真正看到机器在物理世界中持续学习与进化,这也是具身智能真正的黎明。(rick awsb ($people, $people))
分享至:
热门快讯
APP下载
X
Telegram
复制链接