Academics | The Hong Kong University of Science and Technology

RIVL:通过插值法解决在病理图文对齐中遇到的模态缺失问题
龙瀚林
龙瀚林
RIVL:通过插值法解决在病理图文对齐中遇到的模态缺失问题
理图文对齐模型的一大问题是没有足够多的图片-文本对,来支持模型达到更强性能。我们提出一种插值算法,根据与候选图片最相似的数张图片来推导出该图片的文本标注语义向量,以此补充图文对齐的数据量。