AR/MR产品经理必知道betcmp冠军国际的AR眼镜相关技术知识

 新闻资讯     |      2022-01-05 15:34

编辑导语:随着科技的发展,AR眼镜这一产品也由之而生。通过AR眼镜,我们能够看见如同科幻电影的视觉效果,并无需屏幕即可实现交互。与此同时,AR交互方式也在与时俱进。本篇文章里,作者对AR眼镜的相关技术知识进行了介绍,让我们来看一下。

AR/MR产品经理必知道betcmp冠军国际的AR眼镜相关技术知识

一、写在前面

最近几年互联网的发展,相信大家对AR也不能并不陌生了,并且国内市场的AR眼镜厂商鱼龙混杂,真正成熟的可应用于真实场景的AR眼镜设备少之又少。

可能你会提问,为什么可用的AR眼镜少之又少?

来来来,接下来让你像你了解手机一样认识下AR眼镜的技术构造。

在了解AR眼镜之前,你得先知道什么是“增强现实”。

增强现实,用很官方的语言就是:真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。读完这句话你可能会想象到之前看到的科幻电影里的情景,其实差不多是那个意思。再来一张草图你可能会更清楚。

AR/MR产品经理必知道betcmp冠军国际的AR眼镜相关技术知识

AR/MR产品经理必知道betcmp冠军国际的AR眼镜相关技术知识

按照我的官方描述就是:你带上AR眼镜不仅能看到虚拟物体,也能看到你周围的真实环境。

好了,了解完什么是增强现实,我们就可以真正去打开AR眼镜的知识世界了。

先来个AR眼镜的构造图,想必会让你从整体上对AR眼镜有个初步的定位。

AR/MR产品经理必知道betcmp冠军国际的AR眼镜相关技术知识

二、AR眼镜的构造

AR眼镜主要分为四大模块:摄像头、CPU处理中心、光学模组、架托。

1. 摄像头

AR眼镜上一般会存在多个摄像头,并且每个摄像头之间的分工是不一样的,主要功能有三方面,一是用于提供基于视觉的跟踪定位(SLAM)的图像采集,二是进行交互手势识别,三是日常的拍照和录像。

这里重点讲解下什么是SLAM,大家百度之后的官方解说是“即时定位与地图构建,或并发建图与定位”,SLAM应用的场景有很多,比如自动驾驶、AR/VR、机器人、三维重建等;其框架主要分为:

AR/MR产品经理必知道betcmp冠军国际的AR眼镜相关技术知识

其工作流程大致为

传感器读取数据后,视觉里程计估计两个时刻的相对运动(Ego-motion),后端处理视觉里程计估计结果的累积误差,建图则根据前端与后端得到的运动轨迹来建立地图,回环检测考虑了同一场景不同时刻的图像,提供了空间上约束来消除累积误差。

那么SLAM在AR眼镜中怎么工作的呢?首先是通过深度摄像头将你视角内的环境传递给AR眼镜,SLAM通过图像识别、定位分析与AI计算,将当前环境进行三维重建,构造一个三维真实世界,以增强AR眼镜对现实环境中相互作用的理解能力,为AR眼镜赋予了复杂环境感知力和动态场景适应力。

再明白点就是,你知道这个是堵墙,不能过去,AR眼镜也知道这个物体不能穿透过去。

关于SLAM更深层的技术实现问题,就比较深入了,涉及各种算法,在这里就不详细叙述了,大家可以自行百度了解。

2. 核心交互

势交互、语音交互、眼球追踪等,裸手交互有望成为AR的核心交互方式之一,微软的HoloLens2,已经实现了裸手交互,但是国内AR眼镜普遍采用的还是隔空敲物的交互方式,通过识别指定的手势对眼前的虚拟物体进行交互操作,目前市场上AR眼镜最常用的手势为两种分别是确定和返回两个手势;这也是AR眼镜解放双手的优势所在。

确定手势

确定手势

AR/MR产品经理必知道betcmp冠军国际的AR眼镜相关技术知识

返回手势

3. CPU处理大脑

作为AR眼镜的大脑所处理的图像和数据分为以下几个方面:

AI:从AR的输入、虚实融合和输出,整个一条链都需要AI的支持。

云计算和大数据:由于AR结合的是现实,所以它的计算量和数据量会呈现指数级上升,它的发展也离不开云计算和大数据的支持。

计算机视觉:比之于PC和手机,AR的本质是信息呈现方式的升级,由二维升级到三维。不管是AR的输入,还是输出,都离不开计算机视觉。