×

将遮挡检测作为一个反问题。 (英语) Zbl 1371.94122号

小结:随着时间的推移,遮挡通常会变得明显,因为违反光流亮度恒定约束的情况会在遮挡区域累积。基于这一观察,我们提出了一个用于遮挡检测的变分模型,该模型被表示为一个逆问题。我们的正向模型通过利用光流的亮度约束来强调遮挡,而遮挡集上的时空正则化器使我们的模型对噪声和建模误差具有鲁棒性。在极小化方面,我们通过一系列凸优化来逼近由此产生的变分问题,并开发有效的算法来解决这些问题。我们的实验表明,与检测遮挡作为光流估计残差的最新技术相比,所提出的公式(正向模型和正则化器)具有优势。

MSC公司:

94A08型 信息与通信理论中的图像处理(压缩、重建等)
65K10码 数值优化和变分技术

软件:

DeepFlow公司
PDF格式BibTeX公司 XML格式引用
全文: 内政部

参考文献:

[1] Adato,Y.、Vasilyev,Y.,Ben-Shahar,O.、Zickler,T.:从镜面反射流走向形状理论。摘自:计算机视觉国际会议(ICCV),第1-8页(2007年)。doi:10.1109/ICCV.2007.4408883
[2] Alvarez,L.,Deriche,R.,Papadopoulo,T.,Sánchez,J.:利用遮挡检测进行对称密集光流估计。国际期刊计算。视觉。75(3), 371-385 (2007). doi:10.1007/s11263-007-0041-4·Zbl 1477.68322号 ·doi:10.1007/s11263-007-0041-4
[3] Ayvaci,A.,Raptis,M.,Soatto,S.:光流稀疏遮挡检测。国际期刊计算。视觉。97(3), 322-338 (2011). doi:10.1007/s11263-011-0490-7·兹比尔1235.68243 ·doi:10.1007/s11263-011-0490-7
[4] Ayvaci,A.,Soatto,S.:在超像素图形上使用遮挡进行运动分割。摘自:IEEE计算机视觉国际会议,第727-734页(2009年)。doi:10.1109/ICCVW.2009.5457630
[5] Ayvaci,A.,Soatto,S.:具有高效模型选择的可分离物体检测。In:《计算机视觉和模式识别中的能量最小化方法》,第191-204页(2011)
[6] Ballester,C.,Garrido,L.,Lazcano,V.,Caselles,V.:带遮挡检测的TV-L1光流法。模式识别。计算机科学课堂讲稿7476,31-40(2012)
[7] Black,M.J.,Fleet,D.J.:运动边界的概率检测和跟踪。国际期刊计算。视觉。38(3), 231-245 (2000) ·兹比尔1012.68694 ·doi:10.1023/A:1008195307933
[8] Boyd,S.,Vandenberghe,L.:凸优化理论,第25卷,第7版。剑桥大学出版社,纽约(2004年)。doi:10.1080/10556781003625177·Zbl 1058.90049号 ·doi:10.1080/10556781003625177
[9] Brox,T.、Bruhn,A.、Papenberg,N.、Weickert,J.:基于翘曲理论的高精度光流估计。Eur.Conf.计算。视觉。4(5月),25-36(2004年)·Zbl 1098.68736号
[10] Brox,T.,Malik,J.:大位移光流:变分运动估计中的描述符匹配。IEEE传输。模式分析。机器。智力。33(3), 500-513 (2011). doi:10.10109/TPAMI.2010.143·doi:10.1109/TPAMI.2010.143
[11] Butler,D.J.、Wulff,J.、Stanley,G.B.、Black,M.J.:一部用于光流评估的自然主义开源电影。收录:A.Fitzgibbon、S.Lazebnik、P.Perona、Y.Sato、C.Schmid(编辑)Computer Vision ECCV 2012 SE-44。计算机科学讲义,第7577卷,第611-625页。施普林格,海德堡(2012)。doi:10.1007/978-3-642-33783-344·Zbl 1117.94002号
[12] Chambolle,A.,Pock,T.:凸问题的一阶原对偶算法及其在成像中的应用。数学杂志。成像视觉。40(1), 120-145 (2010). doi:10.1007/s10851-010-0251-1·Zbl 1255.68217号 ·doi:10.1007/s10851-010-0251-1
[13] Chan,T.F.,Esedoglu,S.,Nikolova,M.:寻找图像分割和去噪模型全局极小值的算法。SIAM J.应用。数学。66(5), 1632-1648 (2006). doi:10.1137/040615286·Zbl 1117.94002号 ·doi:10.1137/040615286
[14] Chin,T.,Karl,W.,Willsky,A.S.:使用时间相干性的光流概率和顺序计算。IEEE传输。图像处理。3(6), 773-788 (1994) ·数字对象标识代码:10.1109/83.336247
[15] Deriche,R.,Kornprobst,P.,Aubert,G.:保留不连续性的光流估计:变分方法。最近开发计算。视觉。9, 69-80 (1996). doi:10.1007/BF01246637·doi:10.1007/BF01246637
[16] Garg,R.,Pizarro,L.,Rueckert,D.,Agapito,L.:使用子空间约束的非刚性物体的密集多帧光流。摘自:亚洲计算机视觉会议,第460-473页(2011年)
[17] He,X.,Yuille,A.:使用伪深度的遮挡边界检测。计算。视觉。2010, 539-552 (2010)
[18] 喇叭,B.K.P.:机器人视觉。麻省理工学院出版社,剑桥(1986)
[19] Horn,B.K.P.,Schunck,B.G.:测定光流。Artif公司。智力。17(1-3),185-203(1981)。doi:10.1016/0004-3702(81)90024-2·Zbl 1497.68488号 ·doi:10.1016/0004-3702(81)90024-2
[20] Humayun,A.,Mac Aodha,O.,Brostow,G.J.:学习寻找遮挡区域。摘自:计算机视觉和模式识别国际会议,第2161-2168页(2011年)。doi:10.1109/CVPR.2111.5995517
[21] Ince,S.、Konrad,J.:遮挡软件光流估计。IEEE传输。图像处理。17(8), 1443-1451 (2008). doi:10.1109/TIP.2008.925381·doi:10.1109/TIP.2008.925381
[22] Jackson,J.D.、Yezzi,A.J.、Soatto,S.:通过移动和变形层进行动态形状和外观建模。国际期刊计算。视觉。79(1), 71-84 (2007). doi:10.1007/s11263-007-0097-1·doi:10.1007/s11263-007-0097-1
[23] Kolmogorov,V.,Zabih,R.:使用图形切割计算遮挡的视觉对应。IEEE国际协调计算。视觉。2, 508-515 (2001). doi:10.1109/ICCV.2001.937668·doi:10.1109/ICCV.2001.937668
[24] Leordeanu,M.,Zanfir,A.,Sminchisescu,C.:用于运动和遮挡估计的局部仿射稀疏匹配。参加:计算机视觉国际会议(2013)
[25] Lucas,B.D.,Kanade,T.:立体视觉应用的迭代图像配准技术。图像理解。车间130,121-130(1981)
[26] Maver,J.,Bajcsy,R.:阻塞作为规划下一个视图的指南(1993)。数字对象标识代码:10.1109/34.211463
[27] Nagel,H.H.:将“定向平滑约束”扩展到时域和光流导数的估计。载于:欧洲计算机视觉会议(ECCV),第139-148页(1990年)·Zbl 1012.68694号
[28] Pock,T.、Unger,M.、Cremers,D.、Bischof,H.:GPU上总变异模型的快速准确解。Conf.计算。视觉。模式识别。研讨会1,1-8(2008年)。doi:10.1109/CVPRW.2008.4563099·doi:10.1109/CVPRW.2008.4563099
[29] Rockafellar,R.T.:凸分析,第28卷。普林斯顿大学出版社,普林斯顿(1997)·Zbl 0932.90001号
[30] Roth,S.、Domini,F.、Black,M.J.:镜面反射流和表面反射感知。Int.Conf.计算。视觉。模式识别。1, 1869-1876 (2006). doi:10.1167/3.9.413·doi:10.1167/3.9.413
[31] Salgado,A.,Sánchez,J.:大位移光流估计:时间正则化器。技术代表,4月,西班牙拉斯帕尔马斯Ciencias y Tecnologías Cibernéticas大学研究所(2006)
[32] Sargin,M.E.,Bertelli,L.,Manjunath,B.S.,Rose,K.:时空晶格上的概率遮挡边界检测。摘自:计算机视觉国际会议,第560-567页(2009年)。doi:10.1109/ICCV.2009.5459190
[33] Smith,P.,Drummond,T.,Cipolla,R.:通过跟踪边缘进行分层运动分割和深度排序。IEEE传输。模式分析。机器。智力。26(4), 479-494 (2004). doi:10.1109/TPAMI.2004.1265863·doi:10.1109/TPAMI.2004.1265863
[34] Stein,A.N.,Hebert,M.:运动的遮挡边界:低水平检测和中等水平推理。国际期刊计算。视觉。82(3),325-357(2009年)。doi:10.1007/s11263-008-0203-z·doi:10.1007/s11263-008-0203-z
[35] Strecha,C.,Fransens,R.,Gool,L.V.:大位移光流和遮挡检测的概率方法。统计方法视频处理。3247, 71-82 (2004) ·doi:10.1007/978-3-540-30212-47
[36] Sun,D.,Roth,S.,Black,M.J.:光流估计的秘密及其原理。摘自:IEEE计算机视觉和模式识别会议,第2432-2439页(2010年)。doi:10.1109/CVPR.2010.5539939
[37] Sun,D.,Sudderth,E.B.,Black,M.J.:随时间推移的分层分割和光流估计。摘自:《计算机视觉和模式识别国际会议》,第1768-1775页(2012年)。doi:10.1109/CVPR.2012.6247873
[38] Sun,J.,Li,Y.:用于遮挡处理的对称立体匹配。IEEE配置计算。视觉。模式识别。2, 399-406 (2005)
[39] Sundberg,P.,Brox,T.:光流遮挡边界检测和图形/地面分配。在:国际计算机视觉和模式识别会议(2011)
[40] Vasilyev,Y.,Zickler,T.,Gortler,S.,Ben-Shahar,O.:镜面反射流的形状:一个流就够了吗?摘自:IEEE计算机视觉和模式识别会议,第2561-2568页(2011年)。doi:10.1109/CVPR.2111.5995662
[41] Volz,S.、Bruhn,A.、Valgaerts,L.、Zimmer,H.:光流的时间相干性建模。2011年计算机视觉国际会议,第1116-1123页(2011)。doi:10.1109/ICCV.2011.6126359·Zbl 1235.68243号
[42] Wedel,A.,Pock,T.,Zach,C.,Bischof,H.,Cremers,D.:TV-L1光流的改进算法。统计地理。方法。视觉。运动分析。施普林格B,23-45(2009)·doi:10.1007/978-3642-03061-12
[43] Weinzaepfel,P.,Revaud,J.,Harchaoui,Z.,Schmid,C.:DeepFlow:具有深度匹配的大位移光流。参加:计算机视觉国际会议(2013)
[44] Xiao,J.,Cheng,H.,Sawhney,H.:基于遮挡检测的双边滤波光流估计。Eur.Conf.计算。视觉。3951, 211-224 (2006)
[45] Xiao,J.,Shah,M.:使用图形切割在存在遮挡的情况下提取运动层。IEEE传输。模式分析。机器。智力。27(10), 1644-1659 (2005). doi:10.1109/TPAMI.2005.202·doi:10.10109/TPAMI.2005.202
[46] Xu,L.,Jia,J.,Matsushita,Y.:运动细节保持光流估计。IEEE传输。模式分析。机器。智力。34(9), 1744-1757 (2012) ·doi:10.1109/TPAMI.2011.236
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配,可能包含数据转换错误。在某些情况下,zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献,而不要求完整或完全匹配。