Dynamic Open-Vocabulary 3D Scene Graphs for Long-term Language-Guided Mobile Manipulation
ACDC- Automated Creation of Digital Cousins for Robust Policy Learning

ACDC- Automated Creation of Digital Cousins for Robust Policy Learning

数字孪生(DT)作为现实世界非常精确的映射虽然可以用于高精度的训练但是生产DT资产过于繁琐且没有泛化性,不能做到zero-shot。
数字表亲(DC)通过比对模型特征,从模型库中选择类似的表亲模型,用于重建场景训练机械臂。让机械臂针对不同第一次见的场景具有泛化性
(a)它减少了手动微调的需要,以保证一定的保真度,从而能够完全自动化地创建数字表亲,(b)它通过提供一组增强的场景来训练机器人策略,从而有助于更好地应对原始场景中的变化。

Deep Hierarchical Semantic Segmentation
CosyPose-- Consistent multi-view multi-object  6D pose estimation
自定义 Gen6d 物体

自定义 Gen6d 物体

6d pose -- unity coordinate