分类
康奈尔大学新闻

机器人替身模仿您在 VR 中的动作

康奈尔大学布朗大学的研究人员开发了一种增强的远程呈现机器人,可以自动实时响应远程用户在虚拟现实中的动作和手势。

这种名为VRoxy的机器人系统允许远程用户在狭小的空间(如办公室)中通过VR与更大空间中的队友进行协作。VRoxy 代表了康奈尔大学安·鲍尔斯计算与信息科学学院研究人员的最新远程机器人实施例。

Mose Sakashita,信息科学领域的博士生,与VRoxy系统。

“虚拟现实的最大好处是,我们可以利用人们在虚拟现实游戏中使用的各种运动技术,比如立即从一个位置移动到另一个位置,”信息科学领域的博士生Mose Sakashita说。“此功能使远程用户能够在物理上占用非常有限的空间,但在更大的远程环境中与队友协作。”

Sakashita 是 10 月 29 日至 11 月 1 日在旧金山举行的 ACM 用户界面软件和技术研讨会 (UIST) 上发表的《VRoxy: Wide-Area Collaboration From an Office Using a VR-Driven Robotic Proxy》一书的主要作者。

研究人员表示,VRoxy的自动、实时响应能力对于远程和本地队友来说都是关键。使用像 VRoxy 这样的机器人代理,局限于小型办公室的远程团队成员可以在更大的空间中举行的小组活动中进行交互,例如在设计协作场景中。对于队友来说,VRoxy机器人会自动模仿用户的身体姿势和其他重要的非语言线索,否则这些线索在远程呈现机器人和Zoom上会丢失。例如,VRoxy 的显示器(显示用户面部的渲染)会根据用户的焦点相应地倾斜。

VRoxy建立在康奈尔大学一个名为ReMotion的类似机器人的基础上,只有当本地和远程用户拥有相同的硬件和相同大小的工作空间时,它才能工作。VRoxy改变了这一点。研究人员说,该系统将VR中远程用户的微小运动映射到物理空间中的较大运动。

VRoxy 配备了 360 度摄像头、显示用户 VR 耳机捕获的面部表情的显示器、机器人食指和全向滚轮。

戴上VR头盔,VRoxy用户可以访问两种视图模式:实时模式实时显示协作空间的沉浸式图像,以便与本地协作者进行交互,而导航模式显示房间的渲染路径,允许远程用户“传送”到他们想去的地方。研究人员说,这种导航模式允许远程用户更快、更顺畅地移动,并限制晕动病。

研究人员说,该系统的自动特性使远程团队成员只专注于协作,而不是手动操纵机器人。

在未来的工作中,Sakashita希望用机械臂为VRoxy增强功能,允许远程用户通过机器人代理与实时空间中的物理对象进行交互。在其他地方,他设想VRoxy可以自己绘制空间地图,就像Roomba真空吸尘器一样。目前,该系统依靠天花板标记来帮助机器人在房间内导航。他说,支持实时映射的扩展可以允许在教室中部署VRoxy。

论文合著者是:Hyunju Kim和Ruidong Zhang,都是信息科学领域的博士生;布朗大学的布兰登·伍达德(Brandon Woodard)和康奈尔·鲍尔斯(Cornell Bowers)独联体大学信息科学教授弗朗索瓦·吉姆布雷蒂埃(FrançoisGuimbretière)。

这项研究得到了美国国家科学基金会和中岛基金会的支持。

Louis DiPietro 是康奈尔大学安·鲍尔斯计算与信息科学学院的作家。

新闻旨在传播有益信息,英文版原文来自https://news.cornell.edu/stories/2023/10/robot-stand-mimics-your-movements-vr