基于Hadoop的鐵路輿情監(jiān)測系統(tǒng)設(shè)計.pdf

1、鐵路是國家重要的交通基礎(chǔ)設(shè)施，是大眾化的交通工具，是國民經(jīng)濟的大動脈。2013年，鐵路總公司大力改革，推出了一系列利民措施，例如網(wǎng)絡(luò)購票、電話訂票、實名制、貨運電子商務(wù)等一系列服務(wù)措施，但同時也帶來一系列的詬病，在社會產(chǎn)生不同輿論的聲音。因此在改革的序幕中，為了更好地了解社情民意，根據(jù)民意不斷改進鐵路工作和服務(wù)質(zhì)量，建設(shè)一個具備采集監(jiān)測，分析研判、協(xié)調(diào)處置、綜合評估以及報告生成等功能為一體的輿情監(jiān)測系統(tǒng)，對于中國鐵路平穩(wěn)健康發(fā)展將具有重

2、要意義。。
　　論文分析和總結(jié)國內(nèi)外輿情監(jiān)測的發(fā)展和現(xiàn)狀，指出目前鐵路輿情監(jiān)測系統(tǒng)存在的問題和不足，并針對當(dāng)前鐵路輿情監(jiān)測的需求，對采集數(shù)據(jù)、功能等進行了分析。輿情數(shù)據(jù)具有海量和非結(jié)構(gòu)化兩大特點，由于技術(shù)的限制，傳統(tǒng)技術(shù)不能很好地應(yīng)對。Hadoop是開源的大數(shù)據(jù)平臺，專門用于設(shè)計處理海量數(shù)據(jù)。本文從HDFS，Hbase和MapReduce這三個Hadoop的核心模塊入手，設(shè)計了一個高性能的、安全可靠的輿情監(jiān)測處理平臺，能夠滿足鐵路