生成、重建、模拟。
让世界成为练习场。
从图像、视频等输入构建空间上下文,生成新视角、三维场景与动态,已展示机器人导航和操作的 Real-to-Sim。
官方能力与评测 ↗A-017 · 蓝色马克杯
茶几 · 历史位置
每次观察,都有来源。
连续跟踪、按需取证、空间记忆。
三条路线,协同维护同一个世界。
调整四类证据,然后提交两张不同源帧。试试重复同一帧,或让“位置”缺失。
教学简化:第二候选固定为 0.55,其他质量与地图条件假定合格,暂不模拟 FoundYou 歧义重排。修改输入会重置本轮投票。
照片告诉机器人“在哪个像素”,深度告诉它“有多远”,位姿告诉它“放在房间的哪里”。拖动深度,看看同一像素对应的位置怎样变化。
相机横向位置 = (像素横坐标 − 主点) × 深度 ÷ 焦距。再用相机外参、底盘位姿和地图修正转换到地图坐标。
本例固定 u=380、cx=320、fx=600;显示 x_camera=0.1×深度。图为教学投影,不是标定工具。
当前实例 Mask 的快坐标用于查询;操作用可信坐标还需慢几何的质量与来源准入。仅找到旧身份不会自动升级坐标质量。
拖动时间。历史位置会留下,当前操作位置会过期。
示例按原文的 3 秒坐标有效窗口演示;刷新仍受队列、预算和观测质量影响。KAtlas 提供感知与记忆,抓取规划和控制由下游模块负责。
选物少一次重复指认。示范多一份可用经验。
找物有一条历史线索。亲手试试看。
找回物品、持续指定目标、查看上次观察。先交付找物线索,再接入导航与抓取。
工具、容器和任务经历按实例关联。重点验证相似物体混淆、遮挡恢复和移动更新。
把“又看到了什么”升级为“哪个资产变化了”。需补充业务异常规则与人工复核闭环。
让每帧观察持续更新。
将更多计算,留给真正需要核验的变化。
调度教学模型:前台 10 Hz、忽略资源争抢和处理开销。原文 YOLOE 约 8 Hz 是目标配置,并非本演示或机器人实测帧率。共享 GPU 饱和仍可能影响真实延迟。
与“每个可见目标每帧都做重身份取证”的朴素方案比较;这不代表 Atlas 的实现。
观察 60 秒,朴素基线 10 帧/秒:次数 = 目标数 × 600。按需方案:每目标初次 2 份证据 + 每 15 秒复核 1 份(60 秒内另计 4 份)+ 滑杆额外触发次数。
这是简化的任务次数估算,未计检测、跟踪、SAM 纯坐标刷新、点云、I/O、失败重试与硬件资源争用。不能据此推导总 GPU 成本、金额或对 Atlas 的加速倍数。
固定硬件与输入分辨率,对齐任务和准确率约束,测量:前台 p50/p95 帧延迟、重识别确认延迟、每分钟重模型调用、GPU 秒与峰值显存、身份误合并率、错用过期坐标次数。与可访问的 Atlas 任务做交集比较,并单列各自覆盖的能力。
K,取自 Knowin(诺因)。Atlas,意为「地图集」。
KAtlas 为真实物体建立持续更新的空间记忆。
从图像、视频等输入构建空间上下文,生成新视角、三维场景与动态,已展示机器人导航和操作的 Real-to-Sim。
官方能力与评测 ↗围绕同一件真实物体组织跟踪、几何与历史,按需复核。为在线任务提供依据,也为训练与测试积累环境记忆。
体验物体记忆 ↑Atlas 的生成与仿真能力更广。KAtlas 聚焦持续感知与实例记忆。
“更快、更省”需要对齐任务后实测。
同一维度,两边一起看。
通用生成式世界模型;以共享空间上下文组织多模态输入,生成、重建和模拟世界。
物体级持续感知与记忆系统;组合检测、跟踪、身份核验和几何模块,按 Asset ID 组织观察。
输出新视角、深度、点云或 3D Gaussian 场景;可补全未拍到的区域。补全是推断,不能直接视为实测事实。
保存已观测表面、来源视图与位置。未看见不等于不存在,也不等于可通行;当前不提供通用新视角生成或完整场景补全。
支持复用 RGBD 空间上下文和编辑场景。所核验资料未给出家庭长期实例身份维护的对照指标,不据此断言它没有记忆能力。
显式维护同一物体的身份、历史与当前位置,重见后复核;这是设计重点。相似物体、长遮挡与位姿漂移仍需系统评测。
可按指定相机生成 RGB/深度。Beta 工作流由外部应用选择相机;生成一个视角不等于已完成机器人避障与动作控制。
记忆可为找物、重新观察提供线索。候选操作视角、主动避遮挡与整身操作属于下游集成方向,仍需可达性、碰撞检查与控制器。
Atlas 已展示导航、操作的 Real-to-Sim。World Labs 另公布 R2S2R 的仿真训练、真机迁移与策略评测结果;这些是系统层证据,不应全部归于 Atlas 单一模型。
可提供具体家庭的物体、位置和示范经历,作为训练与测试的数据基础。当前材料未证明夜间自主训练、策略提升或 Sim-to-Real 闭环已完成。
World Labs 的 R2S2R 路线已讨论:发现策略弱点,生成针对性练习,再回到真机验证。持续演进并非 KAtlas 独有方向。
可持续更新「这个家」的真实记忆,再接入仿真、学习与验证,让练习跟随家庭变化。这是集成愿景;写入记忆本身不会自动更新策略权重。
可由普通图像估计相机与深度,也可接收已标定的 RGBD 上下文。度量尺度需校准;Beta API 已有文档,具体任务开放取决于账号。
地图级记忆依赖有效 RGB-D、标定与位姿。多模块部署需要 GPU/CPU、队列及存储管理;是否适合端侧设备须按目标硬件验证。
生成时延、生成后场景的本地渲染帧率是两回事。API 可复用场景描述以减少开销;不能把 Atlas 等同于逐帧从零推理。
快线跟踪、后台按需补证,目标是持续更新。前台更新速度不等于身份确认速度;原文约 8 Hz 为检测目标配置,v60 回放不是整机实时跑分。
按 Beta 任务计费,费率可能调整;容量和并发还受服务约束。需依据实际任务、画质、上下文和当前报价核算。
复用身份有望减少重复核验,但仍有检测、跟踪、分割、几何、存储和重试成本。尚无同任务、同质量约束的总成本优于 Atlas 的证据。
生成外观、几何和动态不自动等于可验证的物理精度。World Labs 的 R2S2R 通过仿真/真机配对验证具体任务,仍不能外推为任意环境的保证。
有来源的表面记忆不等于完整占据图、接触动力学或执行安全。历史位置要复核,物体运动记录也不能直接变成机械臂指令。
官方公布相机控制生成、三维重建的定量评测,以及机器人相关演示;R2S2R 另有仿真/真机评测。均为官方报告,本页未独立复现。
现有原文与 v60 仿真 RGB-D 回放展示身份记忆、保留观测和表面重建。尚缺同条件基线、长期家庭运行与自主学习的量化结果。
需要构建、补全或变化三维场景,以及生成新视角和训练测试环境时,其能力更直接相关。
需要持续回答「哪一件、在哪里、发生过什么」时,其设计更直接相关。可探索以真实记忆约束仿真,再将真机结果回写记忆;目前未验证双方已集成。
KAtlas 持续记录这个家的变化;生成与仿真系统构建练习环境;规划、学习与控制模块练习导航、观察和操作。验证后的经验回到真实任务,新的观察继续修正记忆。
World Labs 已公布 R2S2R 训练与评测闭环。KAtlas 的夜间或云端自主演练仍是下游愿景;语义图本身不提供完整物理仿真,记忆增长也不等于策略权重自动更新。
查看 World Labs 系统层证据 ↗只比较交集任务:固定输入、目标设备或云端配额、质量与成功率约束。分别记录观测更新/身份确认的 p50 与 p95 延迟、误合并与遗忘、重定位与几何误差、任务成功率,以及 API、GPU、存储、传输和重试总成本。训练测试另看仿真—真机策略排名一致性与迁移成功率。生成帧率、渲染帧率、在线记忆更新频率不可混为一个数。
上方“每帧重身份取证”仅是教学用朴素基线,不代表 Atlas 的实现。Atlas 可复用空间上下文和场景描述。本页根据公开资料与 KAtlas 当前材料整理,未做同条件对跑,也未独立复现官方报告。双方无从属关系。