×

使用RGB-D传感器高效生成3D表面地图。 (英语) Zbl 1336.94012号

摘要:本文重点讨论了使用商用RGB-D传感器和SLAM方法构建密集3D占用地图的问题。特别是,它解决了3D地图表示的问题,必须能够存储数百万个点,并提供有效的更新机制。提出的解决方案由两个关键要素组成,即视觉里程计和基于表面的地图,但它包含了实质性的改进:以八叉树形式存储表面地图,并使用基于截体剔除的方法来加速地图更新步骤。所进行的实验验证了所开发系统的实用性和效率。

MSC公司:

94A08型 信息与通信理论中的图像处理(压缩、重建等)
68平方英寸10 图像处理的计算方法
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Alahi,A.、Ortiz,R.和Vandergheynst,P.(2012年)。FREAK:快速视网膜关键点,2012年IEEE计算机视觉和模式识别会议,美国罗得岛州普罗维登斯,第510-517页。;
[2] Calonder,M.、Lepetit,V.、Strecha,C.和Fua,P.(2010年)。简介:二进制稳健独立基本特征,计算机视觉ECCV 2010,希腊赫拉克利翁,第778-792页。;
[3] Censi,A.(2008)。使用点对线度量的ICP变体,IEEE机器人与自动化国际会议,ICRA 2008,美国加利福尼亚州帕萨迪纳,第19-25页。;
[4] Clark,J.H.(1976年)。可见表面算法的层次几何模型,ACM通信19(10): 547-554.; ·Zbl 0334.68056号
[5] Dryanovski,I.、Valenti,R.和Xiao,J.(2013)。基于RGB-D数据的快速视觉里程表和地图绘制,2013年IEEE机器人与自动化国际会议(ICRA),德国卡尔斯鲁厄,第2305-2310页。;
[6] Endres,F.、Hess,J.、Engelhard,N.、Sturm,J.,Cremers,D.和Burgard,W.(2012年)。RGB-D SLAM系统评估,2012年IEEE机器人与自动化国际会议(ICRA),美国明尼苏达州圣保罗,第1691-1696页。;
[7] Figat,J.、Kornuta,T.和Kasprzak,W.(2014)。局部特征二进制描述符的性能评估,L.J.Chmielewski等人(编辑),《计算机视觉和图形国际会议论文集》,计算机科学讲稿,第8671卷,施普林格,柏林/海德堡,第187-194页。;
[8] Fischler,M.A.和Bolles,R.C.(1981年)。随机样本共识:图像分析和自动制图应用的模型拟合范例,ACM通信24(6): 381-395.;
[9] Frome,A.、Huber,D.、Kolluri,R.、Bülow,T.和Malik,J.(2004)。使用区域点描述符识别距离数据中的物体,《计算机视觉》(ECCV 2004),捷克共和国布拉格,第224-237页·Zbl 1098.68766号
[10] Gribb,G.和Hartmann,K.(2001年)。从世界视图投影中快速提取视锥平面。;
[11] Handa,A.、Whelan,T.、McDonald,J.和Davison,A.J.(2014)。RGB-D视觉里程计、3D重建和SLAM的基准,2014 IEEE机器人与自动化国际会议(ICRA),中国香港,第1524-1531页。;
[12] Henry,P.、Krainin,M.、Herbst,E.、Ren,X.和Fox,D.(2012)。RGB-D映射:使用运动学风格的深度相机对室内环境进行密集的3D建模,《国际机器人研究杂志》31(5): 647-663.;
[13] Henry,P.、Krainin,M.、Herbst,E.、Ren,X.和Fox,D.(2014)。RGBD映射:使用深度相机对室内环境进行密集的3D建模,见O.Khatib等人(编辑),实验机器人,施普林格,柏林/海德堡,第477-491页。;
[14] Holzer,S.、Rusu,R.、Dixon,M.、Gedikli,S.和Navab,N.(2012年)。自适应邻域选择,用于使用积分图像从组织好的点云数据中实时估计曲面法线,智能机器人和系统(IROS),葡萄牙维拉莫拉阿尔加维,第2684-2689页。;
[15] Hornung,A.、Wurm,K.M.、Bennewitz,M.、Stachniss,C.和Burgard,W.(2013)。OctoMap:基于八叉树的高效概率三维映射框架,自治机器人34(3): 189-206.;
[16] Izadi,S.、Kim,D.、Hilliges,O.、Molyneaux,D.、Newcombe,R.、Kohli,P.、Shotton,J.、Hodges,S.,Freeman,D.、Davison,A.和Fitzgibbon,A.(2011)。KinectFusion:使用移动深度相机进行实时3D重建和交互,《第24届ACM用户界面软件和技术年度研讨会论文集》,UIST'11,加利福尼亚州圣巴巴拉,美国,第559-568页。;
[17] Kasprzak,W.(2010年)。《在计算机视觉框架中集成不同的计算模型》,2010年计算机信息系统和工业管理应用国际会议,波兰克拉科夫,第13-18页。;
[18] Kasprzak,W.、Pietruch,R.、Bojar,K.、Wilkowski,A.和Kornuta,T.(2015)。整合RGB-D图像的数据和模型驱动分析,见D.Filev等人(编辑),第七届IEEE国际会议智能系统IS’2014,智能系统和计算进展,第323卷,柏林/海德堡施普林格,第605-616页。;
[19] Kawewong,A.、Tongprasit,N.和Hasegawa,O.(2013)。一种用于长期SLAM的基于视觉的加速在线增量环路闭合检测,Advanced Robotics27(17): 1325-1336.;
[20] Konolige,K.(2010年)。稀疏束调整,《英国机器视觉会议论文集》,英国阿伯里斯特维思,第102.1-102.11页,DOI:10.5244/C.24.102。;
[21] Konolige,K.、Agrawal,M.和Sola,J.(2011年)。粗糙地形的大尺度视觉里程计,M.Kaneko和Y.Nakamura(编辑),机器人研究,柏林/海德堡斯普林格,第201-212页。;
[22] Koshy,G.(2014)。从opencv内在矩阵计算OpenGL透视矩阵。;
[23] Krainin,M.、Henry,P.、Ren,X.和Fox,D.(2010年)。用于手持式3D物体建模的机械手和物体跟踪,技术报告UW-CSE-10-09-01,华盛顿大学,西雅图。;
[24] Kummerle,R.、Grisetti,G.、Strasdat,H.、Konolige,K.和Burgard,W.(2011年)。g2o:图形优化的一般框架,2011年IEEE机器人与自动化国际会议(ICRA),中国上海,第3607-3613页。;
[25] Leutenger,S.、Chli,M.和Siegwart,R.(2011年)。Brisk:二进制稳健不变可伸缩关键点,2011年IEEE国际计算机视觉会议(ICCV),西班牙巴塞罗那,第2548-2555页。;
[26] Lowe,D.G.(1999)。基于局部尺度不变特征的目标识别,《计算机视觉国际会议论文集》,ICCV'99,希腊科尔基拉,第2卷,第1150-1157页。;
[27] Luck,J.、Little,C.和Hoff,W.(2000年)。使用混合模拟退火和迭代最近点算法进行距离数据注册,ICRA'00:IEEE机器人与自动化国际会议,美国加利福尼亚州旧金山,第4卷,第3739-3744页。;
[28] picka,M.、Kornuta,T.和Stefanáczyk,M.(2016)。基于ICP的点云注册中颜色的利用,R.Burduk等人(编辑),《第九届计算机识别系统国际会议论文集》(CORES 2015),《智能系统与计算进展》,第403卷,柏林/海德堡斯普林格出版社,第821-830页。;
[29] Mair,E.、Hager,G.D.、Burschka,D.、Suppa,M.和Hirzinger,G.(2010年)。基于加速段测试的自适应和通用角点检测,计算机视觉(ECCV 2010),希腊赫索尼索斯,第183-196页。;
[30] Marder Eppstein,E.、Berger,E.、Foote,T.、Gerkey,B.和Konolige,K.(2010)。《办公室马拉松:室内办公室环境中的稳健导航》,2010年IEEE机器人与自动化国际会议(ICRA),美国阿拉斯加州安克雷奇,第300-307页。;
[31] Martínez Mozos,O.、Triebel,R.、Jensfelt,P.、Rottmann,A.和Burgard,W.(2007年)。使用从传感器数据、机器人和自主系统中提取的信息对场所进行监督语义标记55(5) :391-402。;
[32] May,S.、Dröschel,D.、Fuchs,S.,Holz,D.和Nuchter,A.(2009年)。《使用飞行时间摄像机的鲁棒三维映射》,IEEE/RSJ智能机器人和系统国际会议,2009年,美国密苏里州圣路易斯,第1673-1678页。;
[33] Men,H.、Gebre,B.和Pochiraju,K.(2011年)。使用4D ICP算法进行彩色点云注册,2011 IEEE机器人与自动化国际会议(ICRA),中国上海,第1511-1516页。;
[34] Miksik,O.和Mikolajczyk,K.(2012年)。用于快速特征匹配的局部检测器和描述符评估,第21届模式识别国际会议(ICPR),日本筑波,第2681-2684页。;
[35] Muja,M.和Lowe,D.G.(2009年)。具有自动算法配置的快速近似最近邻,计算机视觉理论和应用国际会议VISSAPP'09,葡萄牙里斯本,第331-340页。;
[36] Muja,M.和Lowe,D.G.(2012年)。二进制特征的快速匹配,第九届计算机和机器人视觉会议(CRV),加拿大多伦多,第404-410页。;
[37] Nistér,D.、Naroditsky,O.和Bergen,J.(2004)。视觉里程计,2004年IEEE计算机学会计算机视觉和模式识别会议论文集,CVPR 2004,华盛顿特区,美国,第1卷,第I-652页。;
[38] Nowicki,M.和Skrzypczynski,P.(2014)。安卓平台上用于视觉导航的点特征检测器和描述符的性能比较,2014年国际无线通信和移动计算会议(IWCMC),塞浦路斯尼科西亚,第116-121页。;
[39] Pfister,H.、Zwicker,M.、van Baar,J.和Gross,M.(2000年)。《曲面:作为渲染原语的表面元素》,第27届计算机图形和交互技术年会论文集,SIGGRAPH'00,美国洛杉矶新奥尔良,第335-342页。;
[40] Pomerleau,F.、Colas,F.,Siegwart,R.和Magnenat,S.(2013年)。比较实际数据集上的ICP变量,自主机器人34(3): 133-148.;
[41] Quigley,M.、Gerkey,B.、Conley,K.、Faust,J.、Foote,T.、Leibs,J.,Berger,E.、Wheeler,R.和Ng,A.(2009年)。ROS:开源机器人操作系统,《机器人与自动化国际会议(ICRA)开源软件研讨会论文集》,日本神户。;
[42] Rosten,E.和Drummond,T.(2006)。用于高速角点检测的机器学习,载于A.Leonardis等人(编辑),《计算机视觉-ECCV 2006》,《计算机科学讲义》,第3951卷,施普林格,柏林/海德堡,第430-443页。;
[43] Rusu,R.B.、Bradski,G.、Thibaux,R.和Hsu,J.(2010年)。《使用视点特征直方图进行快速3D识别和姿势设置》,2010 IEEE/RSJ智能机器人和系统国际会议,台湾台北,第2155-2162页。;
[44] Rusu,R.B.和Cousins,S.(2011年)。3D在这里:点云图书馆(PCL),机器人与自动化国际会议,中国上海,第1-4页。;
[45] Shi,J.和Tomasi,C.(1994)。《良好的功能跟踪》,1994年IEEE计算机学会计算机视觉和模式识别会议,CVPR’94,西雅图,华盛顿州,美国,第593-600页。;
[46] Sipiran,I.和Bustos,B.(2011年)。Harris 3D:3D网格兴趣点检测的Harris算子的稳健扩展,可视化计算机27(11): 963-976.;
[47] Skrzypczynski,P.(2009年)。同时定位和映射:一种基于特征的概率方法,国际应用数学和计算机科学杂志19(4) :575-588,DOI:10.2478/v10006-009-0045-z·兹比尔1300.93157
[48] 宋浩,A.(2013)。OpenGL投影矩阵。;
[49] Steder,B.、Rusu,R.B.、Konolige,K.和Burgard,W.(2011年)。考虑物体边界的三维范围扫描点特征提取,2011年IEEE机器人与自动化国际会议,中国上海,第2601-2608页。;
[50] Thrun,S.和Leonard,J.J.(2008)。同步定位和绘图,见B.Siciliano和O.Khatib(编辑),《机器人手册》,柏林/海德堡施普林格,第871-890页。;
[51] Tombari,F.、Salti,S.和Di Stefano,L.(2010年)。用于局部表面描述的直方图的唯一特征,见K.Danilidis等人(编辑),《计算机视觉-ECCV 2010》,《计算机科学讲义》,第6314卷,施普林格-弗拉格出版社,柏林/海德堡,第356-369页。;
[52] Tombari,F.、Salti,S.和Di Stefano,L.(2011年)。用于增强3D特征匹配的组合纹理形状描述符,第18届IEEE图像处理国际会议(ICIP),比利时布鲁塞尔,第809-812页。;
[53] Triebel,R.、Pfaff,P.和Burgard,W.(2006年)。用于室外地形测绘和环路闭合的多级地面地图,2006年IEEE/RSJ智能机器人和系统国际会议,中国北京,第2276-2282页。;
[54] Weise,T.、Wismer,T.,Leibe,B.和Van Gool,L.(2009年)。在线环路闭合的同步扫描,IEEE第十二届国际计算机视觉研讨会(ICCV研讨会),日本京都,第1630-1637页。;
[55] Whelan,T.、Johannsson,H.、Kaess,M.、Leonard,J.和McDonald,J.(2013)。用于密集RGB-D映射的鲁棒实时视觉里程计,2013年IEEE机器人与自动化国际会议(ICRA),德国卡尔斯鲁厄,第5724-5731页。;
[56] Wurm,K.M.、Hornung,A.、Bennewitz,M.、Stachniss,C.和Burgard,W.(2010年)。OctoMap:机器人系统的概率、灵活和紧凑的3D地图表示,ICRA 2010研讨会,台湾台北。;
[57] Zhang,Z.(1994)。用于自由曲线和曲面注册的迭代点匹配,国际计算机视觉杂志13(2): 119-152.;
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。