拟题:
基于混合现实的智能体交互
具体功能:
通过hololens2获取场景数据(识别小车/其他物体的位置,网格信息)。
通过hololens2的立体空间交互能力,指挥小车进行移动,执行任务(譬如抓取柱体并移动到相应位置)。
- 关于移动,可以是在眼镜中通过手部动作画一条路径
- 关于执行任务,可以是眼镜识别出物体的位置后规划小车移动和动作序列(A*or强化学习)->相关信息发给小车->小车收到后执行
通过hololens2的虚拟物体放置功能,譬如可以放置小车的车库,柱体移动到的目标位置等
可以通过hololens2显示小车将要移动的意图