多模态融合
-
【AI理论学习】多模态介绍及当前研究方向
多模态介绍及当前研究方向 什么是多模态? 多模态的任务和数据集有哪些? 多种模态融合的方式有哪些? 多模态任务的研究方向有哪些? 参考资料 什么是多模态? 什么是多模态?多模态指的…
-
多模态关键任务与应用综述(从表征到融合,从协同学习到关键技术梳理)
冗余和互补是多模态各种特征存在的基础 1.双线性池化 特征融合即输入两个模态的特征向量,输出融合后的向量。最常用的方法是拼接、按位乘、按位加。有些作者认为这些简单的操作效果不如外积…