面向社會(huì)媒體的用戶消費(fèi)意圖分析關(guān)鍵技術(shù)研究.pdf

1、隨著網(wǎng)絡(luò)媒體技術(shù)的發(fā)展和普及，Twitter、新浪微博等社會(huì)媒體成為了最普遍的信息發(fā)布、傳播和共享的工具。在這些用戶生成的數(shù)據(jù)中蘊(yùn)含著用戶為了滿足某種需求，在一定購(gòu)買動(dòng)機(jī)的支配下，表達(dá)出對(duì)某產(chǎn)品或服務(wù)的購(gòu)買意愿，我們將此意愿稱之為消費(fèi)意圖。消費(fèi)意圖分析，即針對(duì)用戶表現(xiàn)出的這些購(gòu)買意愿進(jìn)行分析、識(shí)別、挖掘和推理的過(guò)程。
　　面向社會(huì)媒體的用戶消費(fèi)意圖分析主要包含兩大類內(nèi)容：其一是基于文本內(nèi)容的消費(fèi)意圖分析，即用戶明確表達(dá)了對(duì)產(chǎn)品或服

2、務(wù)的購(gòu)買意愿?；谖谋緝?nèi)容的消費(fèi)意圖主要包含兩個(gè)重要元素，分別是消費(fèi)意圖觸發(fā)詞和消費(fèi)意圖對(duì)象，這兩種元素直接引發(fā)用戶的購(gòu)買意愿，是決定用戶消費(fèi)意圖的重要特征；其二是基于用戶偏好的消費(fèi)意圖分析，用戶并未明確表達(dá)對(duì)產(chǎn)品或服務(wù)的購(gòu)買意愿，可以通過(guò)用戶行為信息等表現(xiàn)出對(duì)消費(fèi)需求的偏好，來(lái)判斷用戶的消費(fèi)意圖。本文的研究工作涵蓋了上面兩類問(wèn)題。我們充分利用互聯(lián)網(wǎng)上豐富的文本數(shù)據(jù)、用戶的群體智慧信息、詞匯的語(yǔ)義知識(shí)庫(kù)、以及用戶的行為等信息源，結(jié)合機(jī)器

3、學(xué)習(xí)、統(tǒng)計(jì)機(jī)器翻譯和信息檢索等方法，對(duì)社會(huì)媒體的用戶消費(fèi)意圖分析這一問(wèn)題進(jìn)行探索。本文的主要研究?jī)?nèi)容可概括如下：
　　1.基于特征遷移學(xué)習(xí)的消費(fèi)意圖語(yǔ)料獲取。針對(duì)于社會(huì)媒體的用戶消費(fèi)意圖分析問(wèn)題而言，首先面臨著缺乏訓(xùn)練語(yǔ)料的問(wèn)題，而嚴(yán)重的數(shù)據(jù)稀疏問(wèn)題導(dǎo)致人工標(biāo)注語(yǔ)料的代價(jià)較大。為解決社會(huì)媒體中的消費(fèi)意圖語(yǔ)料獲取這一問(wèn)題，本章自動(dòng)獲取了互聯(lián)網(wǎng)上用戶生成的具有消費(fèi)意圖的異質(zhì)文本，進(jìn)而將消費(fèi)意圖語(yǔ)料獲取看作為領(lǐng)域自適應(yīng)學(xué)習(xí)問(wèn)題。具體來(lái)說(shuō)

4、，本文首先提出了一種基于用戶自然標(biāo)注（查詢-點(diǎn)擊URL）的方法構(gòu)建大規(guī)模源領(lǐng)域訓(xùn)練語(yǔ)料，解決了有指導(dǎo)方法需要人工標(biāo)注的問(wèn)題。其次，為了融合領(lǐng)域間相似性和差異性，引入了共享特征和特有特征的概念，使得從源領(lǐng)域訓(xùn)練的分類器可以直接分類目標(biāo)領(lǐng)域未標(biāo)注的數(shù)據(jù)，進(jìn)而將特有特征嵌入到目標(biāo)領(lǐng)域的訓(xùn)練中，采用自動(dòng)生成大規(guī)模消費(fèi)意圖語(yǔ)料的方法來(lái)提高消費(fèi)意圖檢測(cè)模型的性能。
　　2.基于圖排序的消費(fèi)意圖檢測(cè)。以往基于有指導(dǎo)的消費(fèi)意圖檢測(cè)方法大多依賴于人

5、工標(biāo)注訓(xùn)練語(yǔ)料，這種方法在實(shí)際中是相當(dāng)費(fèi)時(shí)費(fèi)力的。為了充分利用標(biāo)注數(shù)據(jù)和未標(biāo)注數(shù)據(jù)共同提升系統(tǒng)的性能，本章使用了基于弱監(jiān)督的圖排序算法。該方法適用于總數(shù)據(jù)量較大、已標(biāo)注數(shù)據(jù)量相對(duì)較小的情形中，并且可以使未標(biāo)注數(shù)據(jù)和標(biāo)注數(shù)據(jù)同時(shí)參與到圖排序算法的學(xué)習(xí)過(guò)程中。本章將未標(biāo)注數(shù)據(jù)和標(biāo)注數(shù)據(jù)的關(guān)系描述為一個(gè)無(wú)向圖，其中數(shù)據(jù)集中的每個(gè)樣本表示圖上的一個(gè)節(jié)點(diǎn)，每一個(gè)具有相似性關(guān)系的節(jié)點(diǎn)對(duì)連接成圖上的一條邊，利用圖的結(jié)構(gòu)將節(jié)點(diǎn)權(quán)重值傳遞給其相鄰節(jié)點(diǎn)，以

6、此來(lái)為每一個(gè)節(jié)點(diǎn)計(jì)算權(quán)重值，按照最終的節(jié)點(diǎn)權(quán)重值確定節(jié)點(diǎn)類別。此外，與傳統(tǒng)的基于特征訓(xùn)練分類器來(lái)檢測(cè)消費(fèi)意圖的方法進(jìn)行了對(duì)比，實(shí)驗(yàn)結(jié)果表明，本文提出的基于圖排序的方法獲得了更好的結(jié)果。
　　3.基于單語(yǔ)詞對(duì)齊模型的消費(fèi)意圖對(duì)象抽取。消費(fèi)意圖對(duì)象，亦即用戶在具有消費(fèi)意圖的文本中期望購(gòu)買的產(chǎn)品或服務(wù)，是用戶的消費(fèi)意圖得以滿足的明確目標(biāo)。消費(fèi)意圖對(duì)象通常是一個(gè)詞序列形式的文本片段，消費(fèi)意圖對(duì)象抽取是將這樣的詞序列從具有消費(fèi)意圖的文本中抽

7、取出來(lái)。本章將消費(fèi)意圖對(duì)象抽取分為兩個(gè)步驟：（1）消費(fèi)意圖對(duì)象候選抽??；（2）消費(fèi)意圖對(duì)象修正。具體的，在消費(fèi)意圖對(duì)象候選抽取中，為保證消費(fèi)意圖對(duì)象抽取的完整性，本章提出在消費(fèi)意圖對(duì)象抽取中引入詞對(duì)齊的搭配信息和觸發(fā)詞信息，在不需要人工干預(yù)的情況下有效地抽取出消費(fèi)意圖對(duì)象候選。進(jìn)一步，通過(guò)引入限定域知識(shí)庫(kù)對(duì)消費(fèi)意圖對(duì)象修正，從而提高消費(fèi)意圖對(duì)象抽取系統(tǒng)的性能。
　　4.基于用戶偏好的消費(fèi)意圖識(shí)別。不同于已有的基于文本內(nèi)容的消費(fèi)意圖

8、分析研究，提出了融合社會(huì)媒體用戶偏好的消費(fèi)意圖識(shí)別方法。該方法將消費(fèi)意圖識(shí)別視作多標(biāo)記分類問(wèn)題，并綜合使用了基于用戶關(guān)注者的標(biāo)簽特征、領(lǐng)域標(biāo)簽特征、轉(zhuǎn)發(fā)/回復(fù)行為特征以及用戶性別特征等多種特征。由于融合用戶偏好的消費(fèi)意圖識(shí)別難以評(píng)價(jià)，自動(dòng)抽取了大量跨不同媒體的用戶鏈指信息，利用該方法，共抽取出12萬(wàn)余對(duì)的用戶鏈指。在此自動(dòng)評(píng)價(jià)集上的實(shí)驗(yàn)結(jié)果表明，所采用的多標(biāo)記分類方法對(duì)用戶的消費(fèi)意圖識(shí)別是行之有效的，其中使用的各種特征對(duì)于提高消費(fèi)意圖識(shí)