×

框架网

swMATH ID: 43929
软件作者: 黄敬伟、周一超、托马斯·芬克豪斯、列奥尼达斯·吉巴斯
描述: FrameNet:从单个RGB图像学习3D曲面的局部标准框架。在这项工作中,我们介绍了从单个RGB图像中识别密集规范三维坐标系的新问题。我们观察到,图像中的每个像素都对应于底层3D几何体中的一个曲面,其中标准框架可以由三个正交轴表示,一个沿其法线方向,另两个沿其切线平面。我们提出了一种从RGB预测这些轴的算法。我们的第一个见解是,使用最近引入的方向场合成方法自动计算的标准帧可以为任务提供训练数据。我们的第二个见解是,为曲面法线预测设计的网络在联合训练以预测典型框架时,可以提供更好的结果,而在训练以预测标准框架的2D投影时,效果甚至更好。我们推测这是因为标准切线方向的投影通常与图像中的局部梯度对齐,并且因为这些方向通过投影几何和正交约束与3D标准框架紧密相连。在我们的实验中,我们发现我们的方法可以预测三维标准帧,这些标准帧可以用于曲面法线估计、特征匹配和增强现实等应用。
主页: https://arxiv.org/abs/1903.12305
源代码:  https://github.com/hjwdzh/FrameNet网站
依赖项: 蟒蛇
关键词: 计算机视觉;模式识别;arXiv_cs。个人简历
相关软件: 制作3D;ShapeNet公司;OpenGL(OpenGL);交通运输部;款式GAN2;ResMLP公司;布里斯克;效率检测;面2面;OpenPose(打开姿势);NIMA公司;网格实验室;SegStereo公司;锚网;软剪刀;MVS网络;效率网;时尚-MNIST;摄像头网络;DISN公司
引用于: 2文件

在1个字段中引用

2 计算机科学(68至XX)

按年份列出的引文