基于關(guān)鍵幀的視頻內(nèi)容描述方法的研究.pdf

1、隨著多媒體技術(shù)的飛速發(fā)展，關(guān)于如何對(duì)視頻內(nèi)容進(jìn)行描述已成為研究的熱點(diǎn)之一，而結(jié)合人類視覺(jué)系統(tǒng)的視頻內(nèi)容描述方法也越來(lái)越受到研究者們的關(guān)注，并將其應(yīng)用于視頻檢索、智能監(jiān)控、視頻壓縮、視頻復(fù)制檢測(cè)等領(lǐng)域。同時(shí)，隨著智能監(jiān)控系統(tǒng)的廣泛應(yīng)用，對(duì)視頻內(nèi)容的描述在監(jiān)控視頻的事件檢測(cè)方面的應(yīng)用更加突出。因此，對(duì)視頻內(nèi)容的正確描述及在事件檢測(cè)方面的應(yīng)用已經(jīng)成為國(guó)內(nèi)外研究的熱點(diǎn)。
　　 本文是在基于符合人眼視覺(jué)注意機(jī)制的時(shí)空域關(guān)注模型的基礎(chǔ)上，應(yīng)

2、用視覺(jué)關(guān)注轉(zhuǎn)移機(jī)制，提出了一種基于關(guān)鍵幀的視頻內(nèi)容描述方法，并將其應(yīng)用到智能監(jiān)控視頻的事件檢測(cè)中，并同時(shí)對(duì)人臉檢測(cè)和追蹤算法進(jìn)行了研究。本文首先介紹了視頻內(nèi)容描述的基本方法和研究現(xiàn)狀;然后介紹了視覺(jué)關(guān)注模型的基本知識(shí)，接著重點(diǎn)介紹了一種新的時(shí)空域關(guān)注模型的構(gòu)建過(guò)程;并在此基礎(chǔ)上根據(jù)視覺(jué)關(guān)注轉(zhuǎn)移機(jī)制提取表征視頻內(nèi)容的關(guān)鍵幀;接著將基于關(guān)鍵幀的視頻內(nèi)容描述方法應(yīng)用于事件檢測(cè)領(lǐng)域，最后研究了人臉檢測(cè)和追蹤的算法，以便以后將人臉信息作為更高級(jí)的

3、語(yǔ)義特征用于關(guān)注模型的構(gòu)建方面。
　　 本文的主要?jiǎng)?chuàng)新和貢獻(xiàn)在以下幾個(gè)方面:
　　 (1)構(gòu)建一種新的時(shí)空域關(guān)注模型。該模型在實(shí)驗(yàn)室原有研究成果的基礎(chǔ)上，加上視頻的時(shí)域信息，用以時(shí)域關(guān)注為主的權(quán)重將時(shí)域關(guān)注模型和空域關(guān)注模型進(jìn)行融合，構(gòu)建出符合人眼視覺(jué)注意機(jī)制的時(shí)空域關(guān)注模型。
　　 (2)提出一種基于視覺(jué)關(guān)注轉(zhuǎn)移的事件檢測(cè)算法。該算法從人的視覺(jué)關(guān)注特性出發(fā)，將視覺(jué)關(guān)注的轉(zhuǎn)移作為事件檢測(cè)的依據(jù)，根據(jù)時(shí)空域關(guān)注模型

4、提取視頻幀中的受關(guān)注區(qū)域，根據(jù)連續(xù)幀中的最受關(guān)注區(qū)域的變化來(lái)確定人眼視覺(jué)關(guān)注點(diǎn)的轉(zhuǎn)移，形成視頻關(guān)注節(jié)奏，根據(jù)關(guān)注節(jié)奏的變化強(qiáng)度來(lái)選取關(guān)鍵幀，通過(guò)關(guān)鍵幀表明事件發(fā)生的時(shí)刻，從而觸發(fā)對(duì)受關(guān)注事件的提示，并結(jié)合人眼的視覺(jué)注意機(jī)制選擇關(guān)鍵幀中的受關(guān)注區(qū)域作為對(duì)象，用基于meanshift的追蹤算法對(duì)對(duì)象進(jìn)行追蹤，標(biāo)定受關(guān)注對(duì)象在前、后續(xù)幀中的位置，并對(duì)遺留物和被帶走物體進(jìn)行標(biāo)定和突出顯示，從而達(dá)到有效遏制危險(xiǎn)情況發(fā)生的目的。
　　 (3