基于概率的跨媒體檢索方法研究.pdf

1、常見媒體類型包括文本、圖形、音頻和視頻等,在越來越多的領域中人們不再滿足于采取單一模態(tài)對事物進行描述而需要以多種媒體形式對事物進行描述或重現(xiàn)。以此為契機基于語義的跨媒體檢索成為了研究熱點。
　　跨媒體檢索的目標包括多模態(tài)媒體互檢索和多媒體文檔檢索,然而在實現(xiàn)這一目標的過程中常常面臨著不同模態(tài)對象底層特征的異構性和語義鴻溝這兩大難題。針對這兩大問題,常見的解決方法包括降維法、機器學習、相關反饋以及基于本體的檢索模型。
　　典型

2、相關性分析方法的引入,可以在最大程度保留變量相關性的前提下將兩種模態(tài)對象的底層特征映射至新的同構子空間中,因而在新空間中不同模態(tài)對象具有了可比性。在此基礎上再運用邏輯回歸方法于該同構子空間進而提取媒體對象的語義特征,經過子空間學習的媒體對象,都以語義概率向量的形式統(tǒng)一映射至語義子空間。
　　當多模態(tài)對象進行互檢索時,檢索算法不僅考慮對象之間的語義相關性還考慮同種模態(tài)對象之間的相似性,而實現(xiàn)這一方法的途徑是通過在語義子空間中構建媒體