Splat2Act:基于场景扫描实现个性化 VLA 机器人抓取控制
预印本摘要称,研究者提出了 Splat2Act 自动化虚实迁移流水线,仅凭手持手机扫描和用户物体图片,即可将预训练视觉语言动作策略适配到具体建筑场景与物体。该方案结合 3D Gaussian Splatting 与碰撞几何构建数字孪生并自动生成抓取演示,在 101 个扫描环境中生成逾 6.8 万条演示数据。
业务关注点:研究展示了仅靠手机扫描与仿真数据个性化微调通用机器人策略的路径,为降低真实环境演示采集成本提供了参考。
预印本摘要称,研究者提出了 Splat2Act 自动化虚实迁移流水线,仅凭手持手机扫描和用户物体图片,即可将预训练视觉语言动作策略适配到具体建筑场景与物体。该方案结合 3D Gaussian Splatting 与碰撞几何构建数字孪生并自动生成抓取演示,在 101 个扫描环境中生成逾 6.8 万条演示数据。
业务关注点:研究展示了仅靠手机扫描与仿真数据个性化微调通用机器人策略的路径,为降低真实环境演示采集成本提供了参考。
预印本摘要称,研究者提出面向流匹配 VLA 模型的噪声空间学习(NSL)方法,在保持预训练模型冻结的同时学习上下文条件噪声分布以实现高效适配。该框架作为通用适配接口,结合 PPO、SAC 和 AWR 进行了算法实例化,并提供了信息论分析。团队在 LIBERO、RoboTwin 及 4 项真实机器人操作任务中验证了该方案的有效性。
预印本摘要称,语义查询引擎在 temperature 为 0 时依然存在显著的多次运行方差,五次执行中会导致 0.07% 至 10.2% 的行算子输出发生改变,单个任务最高达 24.0%。
预印本摘要显示,研究者提出 Dream to Remember(D2R)方法,利用冻结的预训练世界模型通过想象演练复习先验任务,无需重放缓冲区即可在保留已有技能的同时持续引导冻结的通用机器人策略。
预印本摘要介绍AutoBio+机器人灵巧操作模拟基准,包含4种机器人构型下的14项任务,以及火焰、蒸汽和气泡等动态实验现象。研究者称,该框架结合6个真实实验室场景的高斯泼溅背景和基于mjlab的并行模拟,并通过实机实验评估仿真到现实的迁移。本条依据作者摘要,尚无独立复现或工业现场验收证据。
预印本摘要称,JitterVLA通过回放相同指令与轨迹隔离控制器影响,评估VLA驱动人机操作的运动质量。研究者报告,在200 ms延迟下,插值将模型p99 jerk从615降至106 m/s³;实体UR3实验中的实测改善为3.0%–14.0%,不能混用为同一效果。该摘要提及3个开源VLA管线、838个片段,代码与数据将公开;本条未完成全文或独立复现核验。