通过用无人机增加你的眼球来看穿直墙
机器人制造出梦幻般的遥感系统,非常适合送入灾区或进行搜救。特别是无人机可以通过大型区域或通过结构快速移动,识别损坏或通过从其车载摄像机向远程操作员发送视频馈送来寻找幸存者。虽然无人机提供的数据非常宝贵,但管理它们可能非常困难,特别是一旦它们超出视线范围。
由Okan Erat领导的奥地利施蒂利亚州格拉茨科技大学的研究人员希望改变我们与无人机接口的方式,使用增强现实技术将它们从复杂的飞行机器人转变为远程摄像机,未经训练的用户可以轻松控制。通过HoloLens-Microsoft的混合现实头戴式显示器 - 无人机可以实现一种X射线视觉,让您可以直观地看到墙壁并控制无人机就像抓住虚拟无人机并将其准确放置在您想要的位置它是
HoloLens通过将图像投影到您的视野中来工作。它会仔细地跟踪您的头部所指向的位置,并且它可以覆盖您所看到的顶部不透明墙的另一侧的无人机的视频输入,使其看起来好像墙是透明的。根据无人机配备的摄像机类型,它只能看到有限的视野,所以如果你转头看向不同的方向(或四处移动),无人机将重新定位以给你视野你要的那个
然无人机在大部分环视中自动移动,但很容易手动重新定位,再次利用系统的增强现实。无人机的位置在HoloLens中作为一个小模型可见,您只需伸出手,抓住该模型,然后将其移动到您想要的位置。出于本演示的目的,无人机依靠 OptiTrack外部定位系统来进行路径规划,但是无人机上的SLAM是之前已经完成的。
为了测试这个系统有多好,研究人员开展了一项研究,要求参与者做远程任务,例如通过无人机的摄像头在显示器上阅读文本或将无人机定位在特定的位置。他们要么通过增强现实系统,要么是更传统的遥控器,以及来自无人机的第一人称视频流。参与者普遍偏爱增强现实视图,并且快速完成两次研究任务 - 人们说他们对无人机的控制更精确,更具身临其境(“酷,自然,准确”),而增强现实系统让他们感觉像他们“在场景内”。
实验性无人机设置包括车载计算机,自动驾驶仪,前向摄像头,电池和外部定位标记。
这里的下一步是减少系统目前对外部帮助的依赖,例如跟踪和环境建模,因为这些是目前对实际有用性的最大限制。但这些都是可以解决的问题,而且随着无人机本身变得越来越便宜(AR / VR系统也越来越好),这样的系统的实用性将有望意味着我们实际上可能会在某个时刻尝试一个。因为我们在飞行无人机方面很糟糕 - 而且我们也一直想要X射线视觉。