近期又有个技术想法。
背景
导航嘛,现在常用的就以下几种:
平面简化版地图二维导航
也就是地图 APP 打开后最简单的样子,很方便。
缺点就是需要依靠手机的 GPS 信号和内置陀螺仪来确定当前坐标和当前朝向。一旦手机硬件不太行,定位不太准,或者方向反了,那一般我就需要往前走一小段距离,来判断我是不是走反了。
当前的 AR 导航
是什么呢,就是调用手机摄像头,比如导航朝东走时,把手机镜头朝向东边,就会出现一个箭头,哦,我要朝着边走。
缺点是什么呀,类似的,还是依靠内置陀螺仪确认前进方向。
解决方案
如大标题所述,这是一个 Enhanced AR Navigation,也就是一个强化、改进。
在调用摄像头时,软件可以实时识别周围的建筑招牌,并将店铺名与地图信息匹配,进行三维立体建模,这样可以提供更加精准的方向指示。
可行性分析
动态识别店铺招牌,需要大量的图像、文字识别学习库。暂列以下两种方案:
离线模型
可将远端提前训练好的图像文字识别模型存放到用户端本地,进行 Enhanced AR 导航时可即时调用本地模型进行识别。
实时远端匹配
利用当前 5G 网络的高带宽、低延时,实时传输视频拍摄内容到服务器端,进行图像识别,并返回到客户端进行 3D 建模进行方向导航。