YC 拉了 Waddle Labs 和 Robocurve 的创始人聊怎么用通用模型直接操控机器人,还现场演示了 Astra 控制,搞机器人的可以看看。
#VLA模型
腾讯发了新一代机器人“小六”,相比“小五”在键绳传动和灵巧操作上更先进,还在WAIC现场展示了。想了解轮足机器人最新进展可以看看。
做机器人操作或科学自动化的团队终于有了实验室场景的专用VLA方案——LabVLA解决了数据稀缺和模型适配两大瓶颈,在仿真基准上表现领先,值得关注其后续实物部署进展。
机器人操作研究者终于有了解决灵巧手形态鸿沟的实用方案——InDex用意图条件微调避免了灾难性遗忘,做灵巧操作或VLA模型迁移的团队可以直接参考其两阶段架构。
机器人开发者终于有了一个无需重新训练就能安全引导VLA模型的方法——通过语言反馈策略提升任务成功率,同时避免有害行为。做机器人控制或人机交互的团队可以直接在现有模型上尝试,值得关注。
做机器人操作或VLA模型研究的团队,终于有了专门评估遮挡鲁棒性的基准和解决方案——VIM用视角想象补全感知,无需加摄像头就能提升性能,值得一试。
做机器人安全控制的团队终于有了一个轻量级方案——VLA模型自带的注意力头就能当安全过滤器用,无需额外训练或重模型,动态场景效果还更好,值得点开看实现细节。
GEAR-VLA 解决了机器人操作中跨本体、跨场景泛化的核心痛点,做机器人操作研究的团队可以直接参考其粗到细动作学习与 3D 对齐方法,值得关注其开源代码。
英伟达把自动驾驶模型参数翻了三倍,还开源了全套工具链,做 L4 研发的团队可以直接省掉从零搭建的环节,建议关注夏季开源代码。
做机器人或边缘部署VLA模型的团队终于有了统一量化方案——内存省71%且性能不降,Pi 0.5和GR00T N1.5用户可以直接用代码复现。
做机器人策略学习和 VLA 模型的研究者终于有了可用的细粒度数据框架——FineVLA 不仅开源了 47K 条验证轨迹和基准,还证明了细粒度指令能显著提升操控精度,做双臂操作或仿真迁移的团队可以直接用。
灵巧操作是机器人领域的硬骨头,HandITL 解决了人机干预时的“手势跳跃”痛点,做机器人操作或 VLA 模型微调的团队可以直接参考实验方法,减少训练数据收集中的噪声。