Deep learning based descriptor

1、DH3D: Deep Hierarchical 3D Descriptors for Robust Large-Scale 6DoF Relocalization

论文链接
代码链接

这是一篇训练点云的文章,在训练出local descriptor之后,通过聚类的方法得出global descriptor,并且提出了hierarchical network,使得local descriptor和global descriptor可以通过一个网络得到,通过共享计算降低了网络的复杂度,从而加快计算和训练。

2、RoRD: Rotation-Robust Descriptors and Orthographic Views for Local Feature Matching

论文链接
代码链接(未完成)

使用VGG作为主干网络,然后一半使用D2-net,另一半使用RoRD网络,RoRD网络会给原始图片一个较大的旋转,以提高所训练出的描述子的旋转不变性,D2-net可以保证在旋转较小或者没有旋转的时候,描述子依然可以很好地进行匹配。然后整合两种描述子。

3、DF-SLAM: A Deep-Learning Enhanced Visual SLAM System based on Deep Local Features

论文链接

未找到相关代码

主要思想:Tfeat(论文链接代码链接)结构+Hardnet(论文链接)提出的negative mining strategy

loss function:

采样策略通过L2成对距离矩阵在批次中选择最接近的不匹配patch。首先是生成一堆匹配好的局部patch,对一块patch中的指定anchor,只能一个可以匹配的patch。定义距离矩阵 D = d i j D={d_{ij}} D=dij.表示第 i i i个anchor patch描述子到第 j j j个postive patch描述子。

从而,hardest negative patch distance可以通过下式进行计算:
d n = m i n ( a k m i n , p j m i n ) d_n=min(a_{k_{min}},p_{j_{min}}) dn=min(akmin,pjmin)

这里, a k m i n a_{k_{min}} akmin表示到anchor patch最近的patch, p j m i n p_{j_{min}} pjmin表示到positive patch最近的patch。

从而定义损失函数:

这里, a i a_i ai表示anchor描述子, p i p_i pi是positive描述子。

4、Scale-Adaptive Neural Dense Features: Learning via Hierarchical Context Aggregation

论文链接
代码链接

主要模型框架:

Pixel-wise Contrastive Loss:


相关推荐
珑哥说自养号采购18 小时前
破解亚马逊风控:安全搭建买家号上评系统,提升店铺竞争力
人工智能·eclipse·github
金融小师妹19 小时前
AI多模态宏观建模视角:超级央行周触发“政策—数据—预期”耦合重估框架
大数据·人工智能·逻辑回归·能源
数据门徒19 小时前
神经网络原理 第三章:单层感知器
深度学习·神经网络
FIN666819 小时前
底部蓄力,静待花开——清越科技的韧性与曙光
大数据·人工智能·物联网
小超同学你好19 小时前
Transformer 31. ALBEF:Align before Fuse,用「先对齐、再融合」解决图文交互难学的问题
深度学习·transformer·交互
Gofarlic_OMS19 小时前
UG/NX许可证管理高频技术问题解答汇编
java·大数据·运维·服务器·汇编·人工智能
一念杂记19 小时前
SKILL到底应该怎么写?10 分钟快速掌握 AI 智能体技能开发核心技巧
人工智能·openai·ai编程
AI刀刀19 小时前
手机AI怎么导出pdf
人工智能·ai·智能手机·pdf·deepseek·ds随心转
财迅通Ai19 小时前
天音控股披露最新财报:拥抱AI融合趋势 数智化转型赋能新零售
人工智能·零售·天音控股
tangweiguo0305198719 小时前
AI文生图完整实战:基于阿里云百炼通义万相
人工智能·langchain