基于概率的跨媒體檢索方法研究.pdf

1、常見媒體類型包括文本、圖形、音頻和視頻等,在越來越多的領(lǐng)域中人們不再滿足于采取單一模態(tài)對(duì)事物進(jìn)行描述而需要以多種媒體形式對(duì)事物進(jìn)行描述或重現(xiàn)。以此為契機(jī)基于語義的跨媒體檢索成為了研究熱點(diǎn)。
　　跨媒體檢索的目標(biāo)包括多模態(tài)媒體互檢索和多媒體文檔檢索,然而在實(shí)現(xiàn)這一目標(biāo)的過程中常常面臨著不同模態(tài)對(duì)象底層特征的異構(gòu)性和語義鴻溝這兩大難題。針對(duì)這兩大問題,常見的解決方法包括降維法、機(jī)器學(xué)習(xí)、相關(guān)反饋以及基于本體的檢索模型。
　　典型

2、相關(guān)性分析方法的引入,可以在最大程度保留變量相關(guān)性的前提下將兩種模態(tài)對(duì)象的底層特征映射至新的同構(gòu)子空間中,因而在新空間中不同模態(tài)對(duì)象具有了可比性。在此基礎(chǔ)上再運(yùn)用邏輯回歸方法于該同構(gòu)子空間進(jìn)而提取媒體對(duì)象的語義特征,經(jīng)過子空間學(xué)習(xí)的媒體對(duì)象,都以語義概率向量的形式統(tǒng)一映射至語義子空間。
　　當(dāng)多模態(tài)對(duì)象進(jìn)行互檢索時(shí),檢索算法不僅考慮對(duì)象之間的語義相關(guān)性還考慮同種模態(tài)對(duì)象之間的相似性,而實(shí)現(xiàn)這一方法的途徑是通過在語義子空間中構(gòu)建媒體