基于PoseNet的JavaScript & TensorFlow多人跟踪问题

Question

我们使用多人跟踪问题与PoseNet库的Javascript。我们有时会看到与错误的人相关的数据。

人1

• 跟踪数据

人2

• 跟踪数据

一段时间后：

人1

• 第二人的跟踪数据

人2

• 第一人的跟踪数据

我们可以在Javascript中添加一些代码来检查数据的有效性。这是PoseNet或bug中多人跟踪的工作方式吗？

Answer 1

波塞内不会那样跟踪人的。它只是寻找人，并以某种随机的顺序创建一个数组。换句话说，它从每一个框架开始，而不知道前面的框架。你得自己写一个算法。

我的建议是看看每一帧中的面部点，并将它们与前一帧中的点进行比较。一种天真的方法是简单地在前一个帧中找到与当前帧中的脸最接近的脸。如果您需要以一种更复杂的方式这样做，您将需要执行blob跟踪，您实际上是在查看每个人的颜色/组合，并确保他们在帧之间匹配。