Enhanced AR Navigation

近期又有个技术想法。

背景

导航嘛,现在常用的就以下几种:

平面简化版地图二维导航

也就是地图 APP 打开后最简单的样子,很方便。

缺点就是需要依靠手机的 GPS 信号和内置陀螺仪来确定当前坐标和当前朝向。一旦手机硬件不太行,定位不太准,或者方向反了,那一般我就需要往前走一小段距离,来判断我是不是走反了。

当前的 AR 导航

是什么呢,就是调用手机摄像头,比如导航朝东走时,把手机镜头朝向东边,就会出现一个箭头,哦,我要朝着边走。

缺点是什么呀,类似的,还是依靠内置陀螺仪确认前进方向。

解决方案

如大标题所述,这是一个 Enhanced AR Navigation,也就是一个强化、改进。

在调用摄像头时,软件可以实时识别周围的建筑招牌,并将店铺名与地图信息匹配,进行三维立体建模,这样可以提供更加精准的方向指示。

可行性分析

动态识别店铺招牌,需要大量的图像、文字识别学习库。暂列以下两种方案:

离线模型

可将远端提前训练好的图像文字识别模型存放到用户端本地,进行 Enhanced AR 导航时可即时调用本地模型进行识别。

实时远端匹配

利用当前 5G 网络的高带宽、低延时,实时传输视频拍摄内容到服务器端,进行图像识别,并返回到客户端进行 3D 建模进行方向导航。

深得我心!博主晚餐加鸡腿!