群體行為視覺語義表達(dá)分析及應(yīng)用.pdf

1、群體行為分析與理解作為一個復(fù)雜、多樣、具有挑戰(zhàn)的領(lǐng)域近年來吸引了很多研究機構(gòu)的關(guān)注。在視頻監(jiān)控、人機交互、多媒體內(nèi)容理解等方面,群體行為分析都是重要的組成部分之一。它對于相應(yīng)的目標(biāo)行為檢測、跟蹤和場景建模都有很好的作用,是一項基礎(chǔ)和有意義的工作。那么,作為群體行為分析和理解的基礎(chǔ),合理有效的群體行為語義表達(dá)就顯得尤為重要。
　　本文從群體行為的不同層級語義表達(dá)分析與理解角度闡述,以群體行為異常檢測和挖掘群體行為模式為目標(biāo),旨在分析

2、和研究基于監(jiān)控視頻的有效的群體行為語義描述方式和群體行為語義模式挖掘的合理方法。并提出了相應(yīng)的群體行為的語義表達(dá)概念和基于表達(dá)的應(yīng)用框架,通過大量標(biāo)準(zhǔn)數(shù)據(jù)庫的實驗,對理論框架和算法進(jìn)行了驗證。
　　文章首先探究了群體行為分析的底層特征與高層語義之間的語義鴻溝,分析社會行為模型對于群體行為交互的影響,對比傳統(tǒng)的經(jīng)典社會力模型和方法,提出了符合社會行為模型的社會屬性假設(shè)。以社會屬性假設(shè)為出發(fā)點,建立了具有場景尺度估計和語義上下文結(jié)合的

3、社會屬性力中層語義表達(dá)模型。建立的社會屬性力模型有效的從上下文語義揭示了群體行為交互的本質(zhì)結(jié)構(gòu),通過有監(jiān)督和無監(jiān)督學(xué)習(xí)的方法,進(jìn)行全局和局部的異常檢測的應(yīng)用。在此研究基礎(chǔ)之上,通過對于群體社會屬性假設(shè)的延伸,提出了合理的群體行為情感規(guī)則,建立了基于運動特征的Arousal-Valence(激勵度-喚醒度)情感模型,進(jìn)而對群體運動特征進(jìn)行高層表達(dá),得到群體行為的情感軌跡,并應(yīng)用到群體全局異常檢測和群體行為模式匹配當(dāng)中。實驗結(jié)果展示出我們提