删除或更新信息,请邮件至freekaoyan#163.com(#换成@)

一种低成本的机器人室内可通行区域建模方法*

本站小编 Free考研考试/2021-12-25

近年来,随着计算机、传感器以及图像处理技术[1]的进步,机器人技术也得到了蓬勃的发展。基于视觉的同步定位与建图(Simultaneous Localization and Mapping, SLAM)[2]技术是机器人领域的重要技术之一。SLAM可以利用输入的连续图像来实时解算摄像机的运动轨迹,并且构建场景的地图用以指导机器人的行进。
室内环境是目前小型机器人的主要应用领域。在包括仓储物流、工厂物料搬运、家居服务等应用场景中,小型机器人都有很大的应用潜力。对于以室内为主要工作环境的小型机器人来说,单目摄像头视觉传感器由于较低的成本、较小的体积以及较高的布置灵活性,是机器人获取周围信息的主要来源。利用单目视觉信息获取场景信息以指导机器人的行动,是相关研究的重点方向之一。其中,地面可通行区域的信息,包含了地面的纹理与可通行地面的范围,可以直接用于对机器人的导航。地面可通行区域的建模可以为指导机器人的行动提供很大的便利。
然而,由于室内小型机器人的体积小、视角低、运算能力弱、视场有限,应用视觉SLAM方法来实时理解场景较为困难。能够构建稠密地图的SLAM方法对于计算资源有着较高的要求,不适合运算能力较弱的小型机器人使用。而且,由于其视野内的主要部分为地面且纹理特征较少,基于特征与梯度的SLAM方法只能获得极为稀疏的地图,对于场景的表现能力较差,无法指导机器人行动。但另一方面,绝大多数室内地面均为平面,而且纹理分布较为均匀,这又为地面的建模提供了方便。
针对此问题,本文提出了一种融合图像分割与单目SLAM的室内地面快速建模方法来获取机器人的可通行区域。该方法基于单目特征点SLAM,并结合图像分割,利用SLAM生成的点云与图像分割之间的相互印证来提高地面构建的准确性。最终,生成地面可通行区域的稠密建模,用以指导机器人的行动。
通过实验与对比,在小型移动机器人平台上,相对于主流SLAM方案,本文方法可以显著提高对于地面建模的效果,并且满足在移动平台上实时处理的要求。相比较于经典的单目SLAM方法,本文方法的运行速度接近特征点SLAM,而对地面可通行区域的建模效果则接近稠密,对于机器人的行动有较大的参考价值。
1 相关工作 SLAM问题自1988年被提出,经过近30年的发展,取得了丰硕的成果。单目SLAM目前主要有2条技术路线。直接法SLAM直接利用像素的亮度或梯度来匹配图像间的像素,并可以在解算相机运动的同时生成稠密[3-4]或者半稠密[5-6]的场景地图。特征法SLAM利用点[7-8]或者线特征[9]来匹配图像间的点或者线,进而解算相机运动并生成只包括特征点或线的场景地图。
在建模方面,直接法生成的稠密或半稠密地图相对于特征法生成的稀疏地图有着更多的点,对于场景的描述也更加具有表现力。其中,代表性的系统有2011年的DTAM(Dense Tracking and Mapping)[10]、2014年的LSD-SLAM(Large-Scale Direct monocular SLAM)[11]等。然而,虽然基于特征的SLAM系统只能获得稀疏的地图,但是一般来说具有更快的速度。而且由于便于使用束集调整(Bundle Adjustment, BA[12])进行优化,并进行回环检测[13],特征法获取的轨迹一般来说更加准确与鲁棒。在特征法SLAM中,2007年的MonoSLAM系统[14]与同一年的PTAM(Parallel Tracking and Mapping)[15]是这一领域具有开创性的成果。2015年的ORB-SLAM(ORiented Brief SLAM)[16]系统各项功能较为完备,已经被广大研究者用作后续二次开发研究的基础系统。
为了在保持稳定跟踪的同时,获得更加稠密的地图,有一些方法在特征法的基础上进行场景重建。2010年,Newcombe和Davison[17]提出的方法是在获取了相机位姿与稀疏点云的基础上,利用光流来重建场景表面。2015年,Murartal和Tardos基于ORB-SLAM系统,利用逆深度滤波像素匹配,构建了基于概率的半稠密场景地图[18]。一般来说,此类方法的基本思想为基于SLAM获得的相机轨迹对图像像素进行匹配,并计算其空间位置。此类思路虽然可以结合直接法和特征点法的优点,但是运算量也大大提升,并不符合小型移动平台的运算能力。
为了提高运算的速度,以适应小型移动平台较低的运算能力,近年来,基于视觉的低成本建模方法也成为了一个有意义的研究方向。2016年,Hinzmann等[19]提出了一种针对无人机平台的低成本地面建模方法,利用无人机自身的传感器感知姿态,并结合图像处理方法获得对于地面的稠密建模。但是,该方法基于的图像内容全部为地面,不适用于小型地面无人车。2017年,蒙山和唐文名将直线引入点特征单目SLAM,并通过点线特征以及直线增强的J-Linkage算法构建包含特征平面的场景地图[20],但是该地图相对于纯特征点地图,对场景描述效果的提升有限。2017年,von Stumberg等[21]针对小型旋翼无人机,基于LSD-SLAM提出了一种本地探索避障策略与体素模型构建方法,但是对于地面的建模效果较差。2018年,蒋林等[22]对基于嵌入式平台三维重建算法进行了研究,针对差动式机器人的运动特点对算法进行了针对性的简化,但是所利用的视觉传感器为深度相机而非单目相机。
总体来说,现有的主流单目SLAM系统在小型室内机器人上运行时,由于平台自身的特点,或是地图构建过于稀疏;或是虽地图稠密,但不能实现实时运行。一般并不能在构建场景方面取得令人满意的效果。而现有的低成本建模方法中,针对小型地面机器人特点的研究不多,尚未出现较为合适的地面区域低成本建模方法。
2 室内地面快速建模方法 2.1 整体流程 本文提出的融合图像分割与单目SLAM的室内地面快速建模方法构建在单目特征点SLAM的基础上,利用SLAM系统获得的相机位姿与稀疏点云,结合地面区域的分割图像获得地面的稠密建模。
系统的基本流程如下:首先,利用SLAM系统获得的相机位姿与稀疏点云。其次,利用地面区域的分割图像,将稀疏点云中投影在地面区域的点提取出来,获取粗略的地面稀疏点云。然后,进行滤波后,利用优化模型对这些地面点拟合平面,获取地平面的数学表达。之后,通过计算稀疏点云中的点与该地平面之间的位置关系,将它们相对精确地分为地面与非地面点云。再利用该分类来筛选地面分割图像。最后,通过相机的位姿,将筛选过的地面分割图像投影到地面平面上,并进行滤波与降噪,获得稠密的地面建模。整个系统的流程示意图如图 1所示。
图 1 本文方法整体流程图 Fig. 1 Flowchart of proposed method
图选项




后文将对本文方法流程中的各主要功能模块逐一进行介绍。
2.2 单目SLAM模块 本文使用ORB-SLAM[16]作为系统的单目SLAM模块。ORB-SLAM是一个功能完善,接口便捷的单目SLAM系统。整个系统围绕ORB点特征建立,在效率与精度之间达到了较好的平衡,自发表以来就被研究者们所广泛使用。该系统包含3个平行的线程:跟踪线程(tracking thread)、局部建图线程(local mapping thread)和回环检测线程(loop closing thread)。其中,跟踪线程负责计算相机的运动,以及指定关键帧,并在跟踪丢失时负责重定位;局部建图线程主要负责用局部束集调整(local BA)来对局部地图进行优化,以及地图点的插入和删除;回环检测线程主要负责进行回环检测,在有回环出现时进行闭环全局优化。
2.3 地面区域的分割 在SLAM进程对相机位姿进行跟踪的同时,系统对每一帧输入图像进行分割,以获得地面区域的分割图像。由于系统获得的是一个地面分割的图像序列,并且还需要和点云数据进行比对,所以对于单张地面分割图像的精度要求不高,但是对于图像分割的速度有着较高的要求,这使得采用目前主流的深度学习语义分割的方法[23]较为困难。基于以上分析,本文采用基于HSV(Hue, Saturation, Value)色彩空间的自适应阈值分割方法来对地面区域进行分割。
计算机存储和处理图片时一般采用的颜色编码方式是RGB颜色空间,其将颜色按红、绿、蓝3个维度上的分量进行编码,而HSV颜色空间是按照色度、饱和度和亮度来进行编码,分别对应H、S、V 3个分量,更贴近人眼的视觉感知,受光照的影响也更小[24]。在本文的分割方法中,先将待分割的图像转化到HSV色彩空间。
由于室内小型机器人在运动过程中会与障碍物保持一定距离,所以其摄像头拍摄图像的中间底部一般为地面区域。基于此假设,对于输入图像I,本系统设定图像的底部中间区域为默认地面区域MG,其位置与尺寸如图 2(a)所示。首先,统计得到默认地面区域MG内H、S、V 3个分量的最值。然后对全图像的每个像素pi进行判断:
图 2 地面区域的分割示例 Fig. 2 Example of ground area segmentation
图选项




(1)

式中:HGSGVG分别为默认地面区域MG中所有像素H、S、V分量的集合; hisivi分别为像素pi的H、S、V分量。若像素pi的3个分量均在默认地面区域MG的分量范围内,该像素就被加入候选地面区域G1,如图 2(b)所示。
在获取候选地面区域之后,还需要进行后续的滤波与处理。首先进行开操作(采用运算符号“○”表示)。开操作用于使对象的轮廓变得光滑,断开狭窄的间断和消除细的突出物。开操作的流程是先用结构元素SG1腐蚀(采用运算符号“⊕”表示),然后再用S对结果进行膨胀(采用运算符号“?”表示)[25]。将候选地面区域G1用开操作处理后,得到区域G2
(2)

区域G2图 2(c)所示。其中,本文方法采用的结构元素S为半径为2像素的圆形结构。
最后对区域进行连通域划分,划分结果如图 2(d)所示。选取默认地面区域MG所在的连通域作为分割得到的地面区域G3,如图 2(e)所示。获得的地面分割图像如图 2(f)所示。
2.4 地面点云的获取、滤波与地平面的计算 在SLAM模块向稀疏点云地图中添加每一个空间地图点Qi时,都会判断该点在其对应的地面分割图像上是否位于地面区域。如果位于地面区域,则将该点加入地面点云Cg
然后,利用该地面点云来获得地平面的数学表达。由于点云位置计算误差以及地面分割误差的存在,在后续处理之前,需要先去除地面点云中明显的误差离群点。本文采用统计滤波的方法进行离群点的去除[26]
1) 计算点Qi与其邻域范围内k个邻域点的平均距离。
2) 分析所有点k邻域平均距离,计算其均值m和标准差σ
3) 设置标准差倍数阈值std,确定距离阈值为
(3)

4) 若点Qik邻域平均距离大于距离阈值d,则为噪声点,去除。
本文方法的应用环境是地面为平面的室内环境。建立优化模型对经过统计滤波的地面点云C'g进行平面拟合,使点到平面的总距离最小。设地平面F的表达式为
(4)

优化模型为
(5)

2.5 对地面分割图像的筛选 在获取了地平面F的表达式后,系统对地面分割图像进行筛选。对于每一个关键帧,系统计算其观察到的所有地图点与地平面F的位置关系,并将所有位于地平面F上方μ(单位为cm)以上的点视为非地面点,其余视为地面点。
若某张地面分割图像的地面区域上有超过n个非地面点的投影,则略去这张分割。在本文的实验中,略去的分割如图 3所示(其中红色为非地面点,绿色为地面点)。
图 3 被略去的地面分割图像示例 Fig. 3 An example of excluded ground segmentation image
图选项




图 3可以看出,将墙体下沿的部分瓷砖也划入了地面分割,从而包括了大量非地面点,并因此被略去。
2.6 稠密地面建模 至此,系统通过对稀疏点云与地面分割图像的交叉比对,已经获得了相对精确的地平面与分割图像。利用关键帧的位姿,将地面分割图像投影到地平面上即可得到稠密的地面点云模型,如图 4所示。
图 4 将分割图像投影到地平面对地面建模 Fig. 4 Projecting segmented images to ground plane for ground modeling
图选项




首先,通过相机内参矩阵K,将地面分割图像上的像素pi从图像坐标[u, v]T反投影到相机坐标系中,获得相机坐标系下的坐标PC=[XcYcZc]T
(6)

式中:深度值ZC为未知量。
然后,通过该帧的相机位姿变换矩阵Twc,将相机坐标系下的坐标转换到世界坐标系坐标Pw, 即
(7)

该世界坐标(xw, yw, zw)应该在平面F上,即
(8)

利用式(8)解出未知深度ZC,即可以得到该像素点对应的世界坐标。对所有地面分割图像如此操作后,再进行体素滤波,设定滤波半径为0.01,即半径0.01的范围内只保留一个点。最终,得到地面的稠密点云模型。
3 实验与分析 为了验证本文方法的可行性与实用性,使用搭载了单目摄像头的小型机器人获取数据。数据的处理使用笔记本电脑,搭载Ubuntu 16.04系统,处理器(CPU)为Intel 4 200 H,内存4 G。并同样的环境中用同样的平台运行了ORB-SLAM系统,与本文的系统相对比。
分别以办公室与教室作为实验环境。其中,办公室的地面为瓷砖,颜色与纹理相对连续,但是如图 5(a)所示,地面存在很严重的倒影现象。教室场景较为简单,光照较为均匀,但是如图 5(b)所示,教室的地面上存在明显的黑色地砖缝,地面色彩与纹理不连续。2个实验环境对于地面区域的建模均具有一定的挑战。
图 5 实验环境 Fig. 5 Experimental environment
图选项




经过预实验,在实验中将点云的统计滤波参数设置为k=10,std=1,将地面分割图像筛选过程中的参数设置为μ=3 cm,n=50。
3.1 场景与建模效果
3.1.1 办公室场景 办公室环境和机器人的运动轨迹如图 6所示。本文方法得到的稠密地面建模与非地面稀疏点云如图 7所示。ORB-SLAM得到的场景稀疏点云如图 8所示。
图 6 办公室环境与机器人运动轨迹 Fig. 6 Office environment and robot movement track
图选项




图 7 本文方法得到的办公室稠密地面建模与非地面稀疏点云 Fig. 7 Office dense ground modeling and non-ground sparse point cloud obtained by proposed method
图选项




图 8 ORB-SLAM得到的办公室稀疏点云 Fig. 8 Office sparse point cloud obtained by ORB-SLAM
图选项




办公室场景的地面可通行区域边界本身就并不明晰,所以建模的边缘并不规则。但是本文方法得到的模型能够基本准确地反映通路的宽窄与通过情况,例如中间一段通路中最细的部分反映了因墙面突起造成的障碍。

3.1.2 教室场景 教室环境和机器人的运动轨迹如图 9所示。本文方法得到的稠密地面建模与非地面稀疏点云如图 10所示。ORB-SLAM得到的场景稀疏点云如图 11所示。
图 9 教室环境与机器人运动轨迹 Fig. 9 Classroom environment and robot movement track
图选项




图 10 本文方法得到的教室稠密地面建模与非地面稀疏点云 Fig. 10 Classroom dense ground modeling and non-ground sparse point cloud obtained by proposed method
图选项




图 11 ORB-SLAM得到的教室稀疏点云 Fig. 11 Classroom sparse point cloud obtained by ORB-SLAM
图选项




教室场景的地面比较规则,本文方法所建的模型较好地还原了通行区域的地面情况。但是由于通路狭窄,在转弯的位置相机面对旁边的课桌,地面的图像区域不足,造成转弯部分建模效果稍差。

3.1.3 建模效果 从图 11中可以看出,原ORB-SLAM生成的点云十分稀疏,只是标记了特征点的位置,根本无法从中获得地面的位置以及场景的有效信息,对场景的还原效果较差,基本不能用于对场景的描述,指导机器人行动。而本文方法获得了对于地平面的稠密建模,基本涵盖了机器人视野范围内的可通行区域。相比较原ORB-SLAM算法,本文方法生成的地图更具有实用性。
3.2 运算速度 在实际的运行中,本文方法与ORB-SLAM算法平均每一帧各阶段的运算时间如表 1所示。
表 1 平均每帧运算时间 Table 1 Average operation time per frame
模块运算时间/ms
本文方法 ORB-SLAM
SLAM进程 31.21 32.30
图像分割 5.16
地面点云获取 1.54
拟合平面 0.13
分割图像筛选 1.84
地面稠密建模 7.80
总计 47.68 32.30


表选项






表 1数据可以看出,相比较于ORB-SLAM,本文方法中的SLAM运算时间基本不变。增加的计算时间中,占比最大的部分是图像的分割与地面稠密建模。由于本文方法添加的操作全部是基于关键帧的,所以实际平均到每一帧的时间都很短。总体来看,本文方法能够达到21帧/s的平均运行速度,ORB-SLAM的平均运行速度约为30帧/s。本文方法约为ORB-SLAM的70%, 能够满足预期的应用要求。
3.3 精度分析 由于单目SLAM方法生成的空间数据具有尺度不确定性,所以为分析本文方法的建模精度,首先将生成的相机轨迹与真实的轨迹进行配准,得到数据的正确尺度后,再与实际数据相对比,进行精度分析。而ORB-SLAM得到的稀疏点云地图则过于稀疏,基本上无法从中提取通路的位置与具体范围,精度也无从谈起,故不对其进行精度分析。

3.3.1 地平面的位置还原精度 本文方法对地面进行还原的重要步骤是拟合地平面。由于搭载的相机高度已知,通过对比相机真实高度与相机和拟合地平面之间的平均距离,可以得到地平面的位置还原精度,如表 2所示。可见,地平面位置的还原平均绝对误差为5.8%。
表 2 地平面位置还原精度 Table 2 Accuracy of ground plane position restoration
场景 实际距离/cm 拟合地平面距离/cm 误差/%
办公室 42.0 43.6 3.81
教室 42.0 38.7 -7.86


表选项







3.3.2 场景建模精度 在2个场景中,分别在系统生成的稠密地面模型上选取3处通路的宽度进行测量,与实际地面上通路的宽度进行对比,以分析方法的场景建模精度。由于转弯处存在遮挡,相机拍不到通路的全貌,故选取直线前行的部分通路作为实验分析的对象。
1) 办公室
对地面上3段通路的宽度进行测量(见图 12)。
图 12 办公室通路宽度测量 Fig. 12 Path width measurement of office
图选项




与真实的宽度进行对比,得到的结果如表 3所示。
表 3 办公室地面建模精度 Table 3 Ground modeling accuracy of office
位置 实际距离/cm 模型距离/cm 误差/%
a 135 129 4.4
b 112 108 3.5
c 128 116 10.3


表选项






通过对地面3处通路的宽度进行测量后,我们发现a处和b处精度较高,而c处误差较大。经分析,这部分的误差较大主要是由于地面倒影的影响,分析详见后文3.4.1节。
2) 教室
对系统生成的稠密地面模型进行测量,对地面上3段通路的宽度进行测量(见图 13)。
图 13 教室通路宽度测量 Fig. 13 Path width measurement of classroom
图选项




与真实的宽度进行对比,得到的结果如表 4所示(b处下方蓝圈内为两条通路交叉的位置,并非通路宽度)。
表 4 教室地面建模精度 Table 4 Ground modeling accuracy of classroom
位置 实际距离/cm 模型距离/cm 误差/%
a 82 85 3.6
b 77 81 5.2
c 70 61 12.8


表选项






通过对地面3处通路的宽度进行测量后,发现a处和b处精度较高,而c处相对误差较大。经分析,该部分误差主要由地面纹理不连续造成,分析详见后文3.4.2节。
3.4 外在因素的影响分析
3.4.1 地面倒影 在图 12办公室建模的c处,这一区域摄像机面向窗户,由于室外亮度较大,在地面瓷砖上产生了倒影,使得地面中间区域亮度较高,地面的颜色出现了较大区别。对于地面划分出现了一定的误差,如图 14所示。
图 14 地面倒影对图像分割的影响 Fig. 14 Effect of ground reflection on image segmentation
图选项





3.4.2 地面不均匀纹理 地面的不均匀纹理对于本文方法存在一定的影响。在教室中,地面存在明显的地砖缝,导致有少部分图像对于地面区域的分割不连续,经过连通域计算后只留下一块地砖内的地面,如图 15所示。
图 15 地面不均匀纹理对图像分割的影响 Fig. 15 Effect of uneven texture of ground on image segmentation
图选项




根据对于重建效果的观察和重建精度的分析,虽然存在倒影与地面纹理不均匀造成的图像分割误差,但是它们对于整体的地面重建效果影响较为有限。由于本文方法利用了图像的序列整体信息,对于部分图像的信息缺失,可以通过序列中其他相对正确的分割投影所掩盖。
4 结论 关于场景的建模,从场景中获取有意义的信息。速度与效果间的矛盾一直是研究中一个绕不过去的问题。近年来,国内外有许多研究试图在二者之间达到合适的平衡。本文结论如下:
1) 对于室内小型机器人这一特定应用平台,以及室内环境这一特定场景,很多问题可以得到简化。
2) 本文方法最大限度地利用了特定环境与特定需求,将对全场景的建模简化为地面的建模,将图片深度的求取简化为直接投影在地平面上,可以用尽可能小的计算量来为机器人实时提供尽可能多的信息。
3) 实验证明,本文方法可以以接近特征点SLAM的速度,生成较为准确的地面可通行区域稠密建模。点云与分割的交叉验证以及图像序列的使用也可以在相当程度上抵消地面倒影、地面分割困难等不利情况的影响。

参考文献
[1] LI Z, TANG J. Weakly supervised deep metric learning for community-contributed image retrieval[J]. IEEE Transactions on Multimedia, 2015, 17(11): 1989-1999. DOI:10.1109/TMM.2015.2477035
[2] LIU H, ZHANG G, BAO H. A survey of monocular simultaneous localization and mapping[J]. Journal of Computer-Aided Design & Computer Graphics, 2016, 28(6): 855-868.
[3] TURAN M, ALMALIOGLU Y, ARAUJO H, et al. A non-rigid map fusion-based direct SLAM method for endoscopic capsule robots[J]. International Journal of Intelligent Robotics and Applications, 2017, 1(4): 399-409. DOI:10.1007/s41315-017-0036-4
[4] JAN S, GUMHOLD S, CREMERS D.Real-time dense geometry from a handheld camera[C]//Proceedings of the Pattern Recognition-32nd DAGM Symposium.Berlin: Springer, 2010: 22-24.
[5] ENGEL J, KOLTUN V, CREMERS D. Direct sparse odometry[J]. IEEE Transactions on Pattern Analysis & Machine Intelligence, 2016, 40(3): 611-625.
[6] KIM J H, CADENA C, REID I.Direct semi-dense SLAM for rolling shutter cameras[C]//Proceedings of the IEEE International Conference on Robotics and Automation.Piscataway, NJ: IEEE Press, 2016: 1308-1315.
[7] BAILEY T, NIETO J, GUIVANT J, et al.Consistency of the EKF-SLAM algorithm[C]//Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems (IROS).Piscataway, NJ: IEEE Press, 2006: 9-15.
[8] PIRKER K, MATTHIAS R, BISCHOF H.CD-SLAM-Continuous localization and mapping in a dynamic world[C]//Proceedings of the IEEE/RSJ International Conference on Intelligent Robots and Systems(IROS).Piscataway, NJ: IEEE Press, 2011: 25-30.
[9] GEE A P.MAYOL-CUEVAS W.Real-time model-based SLAM using line segments[C]//Proceedings of the International Symposium on Visual Computing.Berlin: Springer, 2006: 354-363.
[10] NEWCOMBE R A, LOVEGROVE S J, DAVISON A J.DTAM: Dense tracking and mapping in real-time[C]//Proceedings of the IEEE International Conference on Computer Vision (ICCV).Piscataway, NJ: IEEE Press, 2011: 6-13.
[11] ENGEL J, SCH?PS T, CREMERS D.LSD-SLAM: Large-scale direct monocular SLAM[C]//Proceedings of the European Conference on Computer Vision (ECCV).Berlin: Springer, 2014: 834-849.
[12] TRIGGS B, MCLAUCHLAN P F, HARTLEY R I, et al.Bundle adjustment a modern synthesis[C]//Proceedings of the Vision Algorithms: Theory and Practice.Berlin: Springer, 2000: 298-372.
[13] ULRICH I, NOURBAKHSH I R.Appearance-based place recognition for topological localization[C]//Proceedings of the International Conference on Robotics and Automation.Piscataway, NJ: IEEE Press, 2000: 1023-1029.
[14] DAVISON A J, REID I D, MOLTON N D, et al. MonoSLAM:Real-time single camera SLAM[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2007, 29(6): 1052-1067. DOI:10.1109/TPAMI.2007.1049
[15] KLEIN G, MURRAY D.Parallel tracking and mapping for small AR workspaces[C]//Proceedings of the IEEE and ACM International Symposium on Mixed and Augmented Reality.Piscataway, NJ: IEEE Press, 2007: 225-234.
[16] MUR-ARTAL R, MONTIEL J M M, TARDóS J D. ORB-SLAM:A versatile and accurate monocular SLAM System[J]. IEEE Transactions Robotics, 2015, 31(5): 1147-1163. DOI:10.1109/TRO.2015.2463671
[17] NEWCOMBE R A, DAVISON A J.Live dense reconstruction with a single moving camera[C]//Proceedings of the IEEE Conference on Computer Vision and Pattern Recognition (CVPR).Piscataway, NJ: IEEE Press, 2010: 1498-1505.
[18] MURARTAL R, TARDOS J D.Probabilistic semi-dense mapping from highly accurate feature-based monocular SLAM[C]//Proceedings of the Robotics Science and Systems, 2015.
[19] HINZMANN T, SCHNEIDER T, DYMCZYK M, et al.Robust map generation for fixed-wing UAVs with low-cost highly-oblique monocular cameras[C]//Proceedings of the IEEE/RSJ International Conference on Intelligent Robots & Systems.Piscataway, NJ: IEEE Press, 2016: 3261-3268.
[20] 蒙山, 唐文名. 单目SLAM直线匹配增强平面发现方法[J]. 北京航空航天大学学报, 2017, 43(4): 660-666.
MENG S, TANG W M. Monocular SLAM linear matching enhanced plane discovery method[J]. Journal of Beijing University of Aeronautics and Astronautics, 2017, 43(4): 660-666. (in Chinese)
[21] VON STUMBERG L, USENKO V, ENGEL J, et al.Autonomous exploration with a low-cost quadrocopter using semi-dense monocular SLAM[C]//Processing of the European Conference on Mobile Robots, 2017.
[22] 蒋林, 郭晨, 朱志超. 嵌入式平台上的三维重建算法研究[J]. 机械设计与制造, 2018, 330(8): 264-266.
JIANG L, GUO C, ZHU Z C. Research on 3D reconstruction algorithm based on embedded platform[J]. Machinery Design & Manufacture, 2018, 330(8): 264-266. (in Chinese)
[23] BADRINARAYANAN V, KENDALL A, CIPOLLA R. SegNet:A deep convolutional encoder-decoder architecture for scene segmentation[J]. IEEE Transactions on Pattern Analysis and Machine Intelligence, 2017, 39(12): 2481-2495. DOI:10.1109/TPAMI.2016.2644615
[24] 黄寅. 基于HSV颜色空间与形态学的车辆目标分割算法[J]. 大庆师范学院学报, 2017, 37(6): 11-15.
HUANG Y. Vehicle target segmentation algorithm based on HSV color space and morphology[J]. Journal of Daqing Normal University, 2017, 37(6): 11-15. (in Chinese)
[25] 闫敬文. 数字图像处理:MATLAB版[M]. 北京: 国防工业出版社, 2011: 125-127.
YAN J W. Digital image processing by MATLAB[M]. Beijing: National Defence Industry Press, 2011: 125-127. (in Chinese)
[26] 李鹏飞, 吴海娥, 景军锋, 等. 点云模型的噪声分类去噪算法[J]. 计算机工程与应用, 2016, 52(20): 188-192.
LI P F, WU H E, JING J F, et al. Noise classification and denoising algorithm for point cloud model[J]. Computer Engineering and Applications, 2016, 52(20): 188-192. DOI:10.3778/j.issn.1002-8331.1603-0354 (in Chinese)


相关话题/图像 系统 地图 办公室 计算

  • 领限时大额优惠券,享本站正版考研考试资料!
    大额优惠券
    优惠券领取后72小时内有效,10万种最新考研考试考证类电子打印资料任你选。涵盖全国500余所院校考研专业课、200多种职业资格考试、1100多种经典教材,产品类型包含电子书、题库、全套资料以及视频,无论您是考研复习、考证刷题,还是考前冲刺等,不同类型的产品可满足您学习上的不同需求。 ...
    本站小编 Free壹佰分学习网 2022-09-19
  • 基于多尺度失真感知特征的重定向图像质量评估*
    人们越来越依赖移动设备进行工作和娱乐,例如可以通过展开或闭合屏幕以改变屏幕尺寸的可折叠屏幕设备。因此,如何调整图像大小以适应具有不同大小和宽高比的显示设备屏幕,成为与用户体验相关的重要问题。已经有许多成熟的图像重定向方法被提出。为了理解图像重定向方法,图1展示了原始图像以及MIT数据库中应用8个重定 ...
    本站小编 Free考研考试 2021-12-25
  • 车用锂离子电池直冷热管理系统用冷媒研究进展*
    随着全球能源问题及环境问题不断加剧,具备良好环保性和经济性的电动汽车取得了快速发展,2018年中国电动汽车的产销量已超过100万辆,连续4年居世界首位。由于锂离子电池具有高能量密度、高功率密度、长循环寿命和高安全特性等优势,已成为电动汽车的主流储能方式。锂离子电池的工作温度会严重影响其工作特性。锂离 ...
    本站小编 Free考研考试 2021-12-25
  • 基于CNN的多尺寸航拍图像定位方法的研究与实现*
    航拍图像定位大多利用航拍图像的绝对定位。匹配方法中基于特征点的匹配应用最为广泛,适合匹配的特征点有边缘特征[1-3]、点特征[4-6]和区域特征[7-9]等。根据特征空间的不同,基于特征点的匹配方法分为基于特征点局部灰度区域描述符的匹配方法和基于特征点空间结构信息的匹配方法。基于特征点局部灰度区域描 ...
    本站小编 Free考研考试 2021-12-25
  • 耗氧型惰化系统反应器性能理论*
    燃油箱的防火抑爆能力不仅关系到飞机生存能力和易损性,同时也关系到飞机利用率、成本和乘客生命安全[1]。因此,无论对于军机还是民机,都必须采用有效措施来防止油箱燃爆事故发生。从20世纪70年代后期,通过机载设备制取惰化气体的机载惰化技术发展十分迅速,相对于携带惰化气体方式而言,后勤保障要求低,且能实现 ...
    本站小编 Free考研考试 2021-12-25
  • 一种电磁定位系统工作空间拓展方法*
    电磁定位系统(ElectromagneticTrackingSystem,EM)利用电磁感应原理进行位姿测量,具有实时定位、精度高、不惧遮挡的优点[1-2],因而被广泛应用于医学手术中器械的跟踪定位[3-4]。如Wallace等[5]将EM应用于肾上腺、肝脏、肺等位置病变活检手术中的穿刺针导航;Kr ...
    本站小编 Free考研考试 2021-12-25
  • 基于原始对偶内点法的EST图像重建*
    航空发动机高温、高压、高载荷的工况条件使其零部件异常磨损几率相对较高,由发动机齿轮、轴承等零部件磨损造成的故障占提前换发故障的60%和空中停车故障的37.5%。航空发动机零部件异常磨损不易被及时察觉,研究在线油液监测技术,通过实时监测滑油回路中的异常大磨粒(粒径≥40μm)监测发动机的磨损状况,对故 ...
    本站小编 Free考研考试 2021-12-25
  • 基于地面基站的定位系统构建和方案*
    随着社会的发展进步及信息化时代的到来,人们的工作、生活等社会活动越来越依赖于位置信息,位置服务逐渐成为大家关注的焦点。目前室外定位导航技术大多依赖于卫星导航系统,经过几十年的发展,到现在已经比较成熟,如今在运载体导航、人员跟踪定位及紧急救助服务等方面发挥着巨大的作用[1],并且实现了广域精准定位,广 ...
    本站小编 Free考研考试 2021-12-25
  • 基于可变阶变分模型的医用低剂量CT图像去噪*
    X射线CT为医学诊断和治疗提供了人体主要的解剖和病理信息[1]。近年来,越来越多的临床医生通过CT图像对患者的病症进行更准确的诊断,甚至借助CT图像的引导对病灶进行穿刺活检,对人体管道、体腔或器官组织内病理性积液、血肿、或脓肿进行穿刺引流达到治疗的效果。虽然CT技术的发展提高了人类的健康水平,但是高 ...
    本站小编 Free考研考试 2021-12-25
  • 基于深度学习的无人机数据链信噪比估计算法*
    地-空数据链作为无人机系统的重要组成部分,发挥着发送上行遥控指令和回传遥测侦察信息等重要作用[1]。信噪比(Signal-to-NoiseRatio,SNR)是评价无人机通信系统信道环境和通信质量的重要指标,精确的信噪比估计既可以为无人机数据链提供功率控制、信道分配所需要的信息,又可以促使数据链系统 ...
    本站小编 Free考研考试 2021-12-25
  • 基于小波域清晰度评价的光场全聚焦图像融合*
    伴随着计算摄影学新型学科领域的兴起及光场成像理论的发展,光场相机成为近十年来国内外诸多领域关注的热点。相对于传统相机,微透镜光场相机在主镜头后加入了微透镜阵列同时记录空间光线的位置与方向信息[1]。多维度光场信息的记录为光场相机后期图像的处理及应用提供了便利,如利用光场相机数字重聚焦、全聚焦图像生成 ...
    本站小编 Free考研考试 2021-12-25