基于圖像與標(biāo)注語(yǔ)義上下文的圖像自動(dòng)標(biāo)注算法研究.pdf

1、圖像自動(dòng)標(biāo)注是圖像檢索的重要組成，隨著對(duì)圖像檢索功能的需求的日益增加，如何對(duì)圖像進(jìn)行有效的組織和管理也成為信息檢索領(lǐng)域的研究熱點(diǎn)，因此對(duì)圖像自動(dòng)標(biāo)注進(jìn)行研究具有其重要的研究?jī)r(jià)值和應(yīng)用價(jià)值。本文在現(xiàn)有基于內(nèi)容的圖像自動(dòng)標(biāo)注方法的基礎(chǔ)上，著重研究基于圖像塊上下文的圖像自動(dòng)標(biāo)注方法和基于標(biāo)注詞圖像上下文的圖像語(yǔ)義反饋驗(yàn)證方法，以最終改善圖像自動(dòng)標(biāo)注的性能。
　　針對(duì)目前圖像自動(dòng)標(biāo)注算法中圖像分割的獨(dú)立性假設(shè)問(wèn)題和詞到圖像的語(yǔ)義反饋驗(yàn)證問(wèn)

2、題，開(kāi)展了本文的研究工作，提出了以下主要工作和創(chuàng)新:
　　1.提出了基于圖像塊上下文的圖像自動(dòng)標(biāo)注方法。針對(duì)現(xiàn)有圖像自動(dòng)標(biāo)注模型對(duì)圖像分塊之間的獨(dú)立性假設(shè)和權(quán)值分配問(wèn)題，本文通過(guò)關(guān)聯(lián)圖像各個(gè)分塊之間位置關(guān)系，在圖像內(nèi)容上下文關(guān)聯(lián)關(guān)系的尋找上，首先對(duì)圖像塊進(jìn)行上下文關(guān)聯(lián)的序列化表示，然后利用條件隨機(jī)場(chǎng)模型對(duì)圖像塊的關(guān)聯(lián)關(guān)系進(jìn)行建模并進(jìn)行自動(dòng)標(biāo)注。通過(guò)構(gòu)建圖像分塊的序列來(lái)增加對(duì)圖像中上下文關(guān)系的考慮。
　　2.提出了基于標(biāo)注詞圖

3、像上下文的圖像語(yǔ)義反饋驗(yàn)證方法。由于目前的圖像自動(dòng)標(biāo)注算法中認(rèn)為一幅圖像中所有標(biāo)注詞的貢獻(xiàn)相同，因此學(xué)習(xí)算法只能計(jì)算標(biāo)注詞是否與圖像相關(guān)，但無(wú)法獲得標(biāo)注詞語(yǔ)義與圖像語(yǔ)義的相關(guān)程度。針對(duì)上述問(wèn)題，本文利用標(biāo)注模型得到的標(biāo)注結(jié)果所映射的圖像與測(cè)試圖像建立起圖像間的上下文關(guān)系，通過(guò)度量圖像間的相似度距離，來(lái)對(duì)標(biāo)注結(jié)果進(jìn)行排序和篩選，實(shí)現(xiàn)對(duì)圖像語(yǔ)義的反饋驗(yàn)證。
　　最后通過(guò)實(shí)驗(yàn)分別驗(yàn)證了本文提出的基于圖像塊上下文的標(biāo)注方法和基于標(biāo)注詞圖像