×
蒂亚戈·加斯帕;保罗·奥利维拉;保罗·法瓦罗

通过运动恢复实现独立移动摄像机的同步。 （英语） Zbl 1367.68327号

SIAM J.成像科学。 9，第3号，869-900（2016）.
摘要：这项工作解决了视频同步问题，其中包括发现非同步摄像机采集的图像序列之间的时间对齐。这个问题以前已经解决过，假设相机是静态的或共同移动的，并且在不同序列中可见的特征之间存在对应关系。文献中有一些方法成功地去掉了其中一个假设，但没有一种方法能够同时成功地去掉这两个假设。在这项工作中，我们引入了一种新的策略，同步允许自由移动的相机，即使在不同序列中可见的特征之间没有对应关系。我们的方法包括跟踪场景中独立移动的两个刚性对象的特征，并使用它们之间的相对运动作为同步的线索。对于看到（可能）共同刚性运动物体的不同部分的静态或联合运动摄像机，也提出了新的同步算法。尽管这项工作的重点基本上是所提出方法的理论贡献，而不是详尽的实验验证，但还是介绍了用真实数据和合成数据进行的几个概念验证实验。在静态或联合移动相机的情况下，还提供了与最先进的方法的比较。

MSC公司：

第68页第45页 机器视觉和场景理解
62华氏35 多元分析中的图像分析

关键词：

视频同步;多摄像机系统;基于特征的方法;非匹配特征，参数估计;运动中的结构

软件：

摄像机校准;五分;校准;SBA公司
PDF格式BibTeX公司 XML格式引用
\textit{T.Gaspar}等人，SIAM J.成像科学。9，第3号，869--900（2016；Zbl 1367.68327）
全文： 内政部

参考文献：

[1] K.Arun，T.Huang和S.Blostein，{两个}3-{点集}的最小二乘拟合，IEEE Trans。模式分析。《机器智能》，9（1987），第698-700页。
[2] D.S.Bernstein，《矩阵数学：理论、事实和公式》，普林斯顿大学出版社，新泽西州普林斯顿，2009年·Zbl 1183.15001号
[3] J.Bouguet，{Matlab}摄像机校准工具箱，ŭlwww.vision.caltech.edu/bouguetj/calib_doc/。
[4] S.Boyd和L.Vandenberghe，{凸优化}，剑桥大学出版社，纽约，2004年·Zbl 1058.90049号
[5] Y.Caspi和M.Irani，{序列的时空比对}，IEEE Trans。模式分析。《机器智能》，24（2002），第1409-1424页。
[6] J.Crassidis、F.Markley和Y.Cheng，《非线性姿态估计方法综述》，《制导控制动力学杂志》，30（2007），第12-28页。
[7] E.Elhamifar和R.Vidal，《IEEE计算机视觉和模式识别会议论文集》，2009年，第2790-2797页。
[8] O.Faugeras，Q.-T.Luong和S.J.Maybank，{摄像机自校准：理论和实验}，《欧洲计算机视觉会议》，施普林格出版社，1992年，第321-334页。
[9] T.Gaspar、P.Oliveira和P.Favaro，{两个独立移动摄像机的同步，无特征对应}，《欧洲计算机视觉会议论文集》，瑞士苏黎世，2014年，第189-204页。
[10] G.H.Golub和C.F.V.Loan，《矩阵计算》，第1卷，第3版，约翰霍普金斯大学出版社，巴尔的摩，1996年·Zbl 0865.65009号
[11] R.Hartley和A.Zisserman，《计算机视觉中的多视图几何》，第二版，剑桥大学出版社，纽约，2004年·Zbl 1072.68104号
[12] R.Horaud和F.Dornaika，《手眼校准》，国际。《机器人研究杂志》，14（1995），第195-210页。
[13] T.Kanade和D.Morris，{运动结构分解方法}，Philos。变速器。R.Soc.伦敦。序列号。数学。物理学。工程科学。，356（1998），第1153-1173页·Zbl 0901.68211号
[14] G.Liu，Z.Lin，S.Yan，J.Sun，Y.Yu和Y.Ma，通过低秩表示实现子空间结构的鲁棒恢复，IEEE Trans。模式分析。《机器智能》，35（2013），第171-184页。
[15] M.I.A.Lourakis和A.A.Argyros，《通用稀疏束调整软件包》，ACM Trans。数学。《软件》，36（2009），第2页·Zbl 1364.65052号
[16] F.L.Markley，{利用矢量观测和奇异值分解确定姿态}，J.Astronaut。科学。，36（1988），第245-258页。
[17] D.Marquardt，非线性参数最小二乘估计算法，J.SIAM，11（1963），第431-441页·兹比尔0112.10055
[18] B.Meyer、T.Stich、M.Magnor和M.Pollefeys，《非平稳相机的子帧时间对齐》，《英国机器视觉会议论文集》，2008年。
[19] R.M.Murray、Z.Li和S.S.Sastry，《机器人操作数学导论》，CRC出版社，佛罗里达州博卡拉顿，1994年·Zbl 0858.70001号
[20] K.E.Ozden、K.Schindler和L.V.Gool，{多体结构-实际运动}，IEEE Trans。模式分析。《机器智能》，32（2010），第1134-1141页。
[21] P.Schoönemann，{正交procutes问题的广义解}，《心理测量学》，31（1966），第1-10页·Zbl 0147.19401号
[22] J.Shi和C.Tomasi，{\it Good features to track}，《IEEE计算机视觉和模式识别会议论文集》，1994年，第593-600页。
[23] S.N.Sinha和M.Pollefeys，{从轮廓同步和校准摄像机网络}，《IEEE模式识别国际会议论文集》，第1卷，2004年，第116-119页。
[24] H.Steweínius、C.Engels和D.Nisteír，{\it直接相对定向的最新发展}，《摄影测量遥感》，60（2006），第284-294页。
[25] P.Sturm和B.Triggs，{基于因子分解的多图像投影结构和运动算法}，《欧洲计算机视觉会议论文集》，1996年，第709-720页。
[26] C.Tomasi和T.Kanade，{正字法下图像流的形状和运动：因式分解方法}，国际计算机杂志。视觉。，9（1992），第137-154页。
[27] P.Tresadern和I.Reid，{同步非刚性物体的图像序列}，《英国机器视觉会议论文集》，2003年，第629-638页。
[28] B.Triggs、P.F.McLauchlan、R.I.Hartley和A.W.Fitzgibbon，{束调整-现代综合}，摘自《视觉算法：理论与实践》，纽约斯普林格出版社，2000年，第298-372页。
[29] T.Tuytelaars和L.Van Gool，{同步视频序列}，《IEEE计算机视觉和模式识别会议论文集》，第1卷，2004年，第762-768页。
[30] L.Wolf和A.Zomet，{非刚性场景中的无对应同步和重建}，《动态场景视觉和建模研讨会论文集》，2002年。
[31] J.Yan和M.Pollefeys，{通过时空兴趣点分布实现视频同步}，《智能视觉系统高级概念论文集》，2004年。
[32] A.Yilma和M.Shah，{识别未校准移动摄像机采集的视频中的人类行为}，《IEEE计算机视觉国际会议论文集》，第1卷，2005年，第150-157页。
[33] Z.Zhang，{\它是一种灵活的摄像机校准新技术}，IEEE Trans。模式分析。《机器智能》，22（2000），第1330-1334页。
[34] C.Zhou和H.Tao，{非同步视频流的动态深度恢复}，《IEEE计算机视觉和模式识别会议论文集》，2003年第2卷，第351-358页。
此参考列表基于出版商或数字数学图书馆提供的信息。其项与zbMATH标识符进行启发式匹配，可能包含数据转换错误。在某些情况下，zbMATH Open的数据对这些数据进行了补充/增强。这试图尽可能准确地反映原始论文中列出的参考文献，而不要求完整或完全匹配。