该软件通过互联网,将机器人的手臂和抓手以及车载摄像头和传感器连接到现成的VR硬件中。使用手持控制器,用户可以通过移动自己的手臂来控制机器人手臂的位置,执行复杂的操作任务。
用户可以进入机器人的金属皮肤,以第一人称视角观察环境,或者可以在机器人周围走动,以第三人称视角观察环境。你可以自由切换,寻找最方便完成任务的视角。
布朗大学研究生David Whitney是这一系统的联合负责人,他表示:“我们认为这可以用于需要精巧操作、而且人类不应该亲临现场的情景。我们认为有三个典型的例子:拆弹,在受损的核设施内工作、或在国际空间站操作机械臂。”
惠特尼与布朗本科生埃里克·罗森(Eric Rosen)共同领导了这项工作。这两个人都在布朗的“机器人实验室”,该实验室由计算机科学助理教授Stefanie Tellex领导。