群體行為視覺(jué)語(yǔ)義表達(dá)分析及應(yīng)用.pdf

1、群體行為分析與理解作為一個(gè)復(fù)雜、多樣、具有挑戰(zhàn)的領(lǐng)域近年來(lái)吸引了很多研究機(jī)構(gòu)的關(guān)注。在視頻監(jiān)控、人機(jī)交互、多媒體內(nèi)容理解等方面,群體行為分析都是重要的組成部分之一。它對(duì)于相應(yīng)的目標(biāo)行為檢測(cè)、跟蹤和場(chǎng)景建模都有很好的作用,是一項(xiàng)基礎(chǔ)和有意義的工作。那么,作為群體行為分析和理解的基礎(chǔ),合理有效的群體行為語(yǔ)義表達(dá)就顯得尤為重要。
　　本文從群體行為的不同層級(jí)語(yǔ)義表達(dá)分析與理解角度闡述,以群體行為異常檢測(cè)和挖掘群體行為模式為目標(biāo),旨在分析

2、和研究基于監(jiān)控視頻的有效的群體行為語(yǔ)義描述方式和群體行為語(yǔ)義模式挖掘的合理方法。并提出了相應(yīng)的群體行為的語(yǔ)義表達(dá)概念和基于表達(dá)的應(yīng)用框架,通過(guò)大量標(biāo)準(zhǔn)數(shù)據(jù)庫(kù)的實(shí)驗(yàn),對(duì)理論框架和算法進(jìn)行了驗(yàn)證。
　　文章首先探究了群體行為分析的底層特征與高層語(yǔ)義之間的語(yǔ)義鴻溝,分析社會(huì)行為模型對(duì)于群體行為交互的影響,對(duì)比傳統(tǒng)的經(jīng)典社會(huì)力模型和方法,提出了符合社會(huì)行為模型的社會(huì)屬性假設(shè)。以社會(huì)屬性假設(shè)為出發(fā)點(diǎn),建立了具有場(chǎng)景尺度估計(jì)和語(yǔ)義上下文結(jié)合的

3、社會(huì)屬性力中層語(yǔ)義表達(dá)模型。建立的社會(huì)屬性力模型有效的從上下文語(yǔ)義揭示了群體行為交互的本質(zhì)結(jié)構(gòu),通過(guò)有監(jiān)督和無(wú)監(jiān)督學(xué)習(xí)的方法,進(jìn)行全局和局部的異常檢測(cè)的應(yīng)用。在此研究基礎(chǔ)之上,通過(guò)對(duì)于群體社會(huì)屬性假設(shè)的延伸,提出了合理的群體行為情感規(guī)則,建立了基于運(yùn)動(dòng)特征的Arousal-Valence(激勵(lì)度-喚醒度)情感模型,進(jìn)而對(duì)群體運(yùn)動(dòng)特征進(jìn)行高層表達(dá),得到群體行為的情感軌跡,并應(yīng)用到群體全局異常檢測(cè)和群體行為模式匹配當(dāng)中。實(shí)驗(yàn)結(jié)果展示出我們提