計(jì)算機(jī)屏幕操作記錄系統(tǒng)關(guān)鍵技術(shù)研究.pdf

1、隨著計(jì)算機(jī)、多媒體與網(wǎng)絡(luò)技術(shù)的飛速發(fā)展，視頻數(shù)量正以幾何級(jí)數(shù)的趨勢(shì)不斷增長(zhǎng)，同時(shí)視頻生成技術(shù)也衍生出了許多新的應(yīng)用方式，計(jì)算機(jī)屏幕操作記錄正是其中的一種。計(jì)算機(jī)屏幕操作記錄能夠?qū)崿F(xiàn)對(duì)包括計(jì)算機(jī)屏幕活動(dòng)圖文信息以及音頻信號(hào)在內(nèi)信息的連續(xù)的數(shù)字化的記錄，目前已經(jīng)在很多行業(yè)獲得了廣泛的應(yīng)用。
　　本文以計(jì)算機(jī)屏幕操作記錄與分析為主題展開(kāi)論述，文章首先介紹了國(guó)內(nèi)外計(jì)算機(jī)屏幕操作記錄技術(shù)的學(xué)術(shù)研究以及其商業(yè)化應(yīng)用情況，并結(jié)合現(xiàn)有實(shí)現(xiàn)方式的缺

2、陷以及本文特殊的應(yīng)用背景，介紹了一套計(jì)算機(jī)屏幕操作記錄系統(tǒng)框架。該系統(tǒng)以基于嵌入式SOC的計(jì)算機(jī)屏幕操作記錄設(shè)備為核心硬件設(shè)備，通過(guò)嵌入式Web Server以及用戶端軟件實(shí)現(xiàn)對(duì)計(jì)算機(jī)屏幕的實(shí)時(shí)記錄和分析。本文將計(jì)算機(jī)屏幕操作記錄硬件設(shè)備劃分為多個(gè)功能模塊，對(duì)每個(gè)模塊的設(shè)計(jì)做出了描述，并在此基礎(chǔ)上，介紹了系統(tǒng)軟件架構(gòu)、組成及其功能。
　　然后，重點(diǎn)對(duì)計(jì)算機(jī)屏幕操作記錄系統(tǒng)用戶端軟件的開(kāi)發(fā)進(jìn)行了闡述，對(duì)與此相關(guān)的鍵鼠數(shù)據(jù)解析技術(shù)進(jìn)行

3、了研究。對(duì)于客戶端軟件部分，在對(duì)用戶需求做出分析的基礎(chǔ)上，詳細(xì)描述了用戶登錄、視頻直播與點(diǎn)播、視頻下載、編碼參數(shù)設(shè)置、鍵鼠數(shù)據(jù)解析等功能模塊的設(shè)計(jì)與實(shí)現(xiàn)。對(duì)于鍵鼠數(shù)據(jù)解析部分，首先介紹與討論了PS/2協(xié)議的特點(diǎn)，選用二維字符數(shù)組法、結(jié)構(gòu)體數(shù)組法、關(guān)聯(lián)數(shù)組法三種不同的方法對(duì)計(jì)算機(jī)屏幕操作記錄設(shè)備獲取的鍵鼠操作數(shù)據(jù)做出了解析，通過(guò)性能測(cè)試從處理速度與內(nèi)存占用兩個(gè)角度對(duì)這些方法進(jìn)行了比較與分析。實(shí)驗(yàn)結(jié)果表明，關(guān)聯(lián)數(shù)組法的性能表現(xiàn)最優(yōu)，并在此方

4、法的基礎(chǔ)上擴(kuò)展實(shí)現(xiàn)了用戶感興趣的組合按鍵操作的識(shí)別。
　　對(duì)計(jì)算機(jī)屏幕操作記錄視頻內(nèi)容進(jìn)行分析十分重要。為了快速有效地獲取計(jì)算機(jī)屏幕操作記錄視頻中所包含的重要操作信息，本文在分析了現(xiàn)有鏡頭邊界檢測(cè)算法的基礎(chǔ)上提出了一種基于多種特征融合的屏幕操作場(chǎng)景轉(zhuǎn)換(SOST)檢測(cè)算法，該方法分別提取計(jì)算機(jī)屏幕操作記錄視頻的四種底層特征用于構(gòu)造特征向量，利用SVM分類器檢測(cè)其中包含的SOST操作。本文選取了其它四種算法并從同一算法對(duì)不同視頻序列