什么是“信仰地图”和“亲缘图”？

Question

在评估Nvidia-深度物体的姿态估计时，我遇到了这些术语，信念地图和亲和力图。我还没能在网上找到关于这些术语的令人满意的答案。

Answer 1

在计算机视觉中，姿态估计是对物体的方位和定位的检测。

信念地图

来自Nvidia的一个团队提出了"深部目标姿态估计"，它有两个主要组成部分：

• 检测图像中的对象并生成二维关键点映射
• 项目2D映射到6D

根据我所看到的，“信念映射”是由其系统的第一个组件生成的，并描述了2D 关键点映射的元素，然后由第二个组件投影到6D。来自文章：

前馈网络以大小为w×h×3的RGB图像作为输入，并通过分支产生两种不同的输出，即信念映射和向量场。这里有九张信仰地图，一张对应于三维包围盒的投影的8个顶点，一张对应于质心。类似地，有8个向量场指示从8个顶点到相应的质心的方向。来检测同一类型对象的多个实例。

亲缘域

我还没有遇到关联映射，但是关联字段被称为上图，因为它们的姿态估计方法的灵感来源，特别是在"基于局部亲和场的实时多人二维姿态估计“中。这篇文章旨在解决如何在包含多个人的视频中将肢体赋予人的问题。

亲和映射是“编码人体肢体位置和方向的关键点关联的显式非参数表示”，您可以在它们的视频中看到一个演示(这非常酷)。

所以把它带回到第一条，亲和域类似于上面提到的向量场。它们用于将5中的身体部分与特定的人相关联，或将信念顶点映射到4.中表示对象的质心映射。

因此，信念地图代表了他们深层次的CNN提取的特征，向量/亲和域帮助将这些顶点与检测到的项关联起来。