8月7日青亭网报道,近期香港科技大学与香港科技大学大疆联合实验室公布了一项新研究,该研究通过AR眼镜与无人机配合,通过AR眼镜生成场景三维地图,然后即可在屏幕上随意指挥和操控无人机,进行可视化的第三人称视角飞行操作。

打开网易新闻 查看更多图片

一直以来,操控无人机都是一件对技术要求比较高的工作,无论是室内、室外场景。(本文来自青亭网,未经授权禁止转载)

而本研究则是基于HoloLens的环境感知能力,通过可直接在眼前呈现一幅彩色地形图,同时基于无人机的深度传感器数据,最终实现各个角度包含深度地形图,包含空间高度等信息。

青亭网此前进行报道,爱普生也与大疆无人机进行过AR飞行操控的研究。而这个方案的特点就是通过AR眼镜中第三人称视角进行控制,通过手势捏合即可控制无人机进行位置调整等。

据悉,该AR无人机飞行控制方案还存在一些难点:当前主要在室内,通过WiFi网络传输信号;而在室外则希望寄托于5G网络实现;另外,HoloLens(AR眼镜)的视场角普遍偏小,不便于无人机频繁快速的大范围移动操作;AR眼镜的操控(包括手势交互等)在部分场景下依然不完美;

而该研究表示:通过这种第三人称视角的无人机飞行,带宽方面的效率远比第一视角下要高。图传数据量可以减小,AR飞行控制方案每秒进行10次传输约272MB,而传统第一视角图传30 fps下也要1.39GB。

尽管如此,AR飞行控制研究仍然拥有较大潜力。据悉,该研究成果将在10月25日举行的IROS 2020大会上进行公布。