首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >什么是将音频和视觉数据结合在一起进行预测的最佳方法?

问什么是将音频和视觉数据结合在一起进行预测的最佳方法?
EN

Data Science用户
提问于 2020-06-07 09:33:27
回答 1查看 320关注 0票数 0

我试图通过使用音频和图像来预测疾病的概率,音频和图像并不来自同一个来源。我正在考虑将两个模型的输出(可能是平均值)结合起来,一个使用图像数据来计算概率,另一个使用音频数据。我对这种方法感到不确定,因为我无法验证最终的合并输出。结果是可靠的,还是我应该使用不同的方法?

EN

回答 1

Data Science用户

发布于 2020-06-07 20:29:00

您可以尝试融合图像和音频数据。你可以用不同的方式融合:

1)特征级的早期融合

2)后期融合--输出级的融合(类似于你的想法)

以下是一些供您参考的论文:

听着,听着,学习https://arxiv.org/pdf/1705.08168.pdf

在多模式深度学习https://arxiv.org/pdf/1805.11730.pdf中学习组合模式

票数 0
EN
页面原文内容由Data Science提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://datascience.stackexchange.com/questions/75613

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档