推出多模态通用模型,多模态图像是什么( 二 )


比如网页中新闻的图片和文字信息等等 。2)成对的数据的学习 , 即不同模态的数据已经成对匹配好了 。而在此基础之上进行跨模态信息的检索 。3)基于排序的学习 , 关键在于如何设计出he4)监督学习 , 利用已经人为标记好的标签信息来进行学习 。不仅要学习出不同模态下相同语义的关系 , 同时也还要学习出不同模态的相同标签之间数据的关系 。

推荐阅读