基于自動分詞處理的城市供水投訴管理平臺的設(shè)計與實現(xiàn).pdf

1、隨著我國經(jīng)濟快速增長和人民生活水平顯著提升，居民對身體健康和生活品質(zhì)提出了更高的要求，尤其是生活中賴以生存的飲用水水質(zhì)問題，同時隨著社會發(fā)展與科技變革，水質(zhì)中的污染有害物種類也在不斷增加，供水水質(zhì)安全問題已成為社會安全的熱點問題。而居民對自來水水質(zhì)的疑問和投訴是對供水水質(zhì)最直接的判斷，是對企業(yè)供水工作最直接的監(jiān)督，同時通過對水質(zhì)投訴數(shù)據(jù)的分析與標記，有利于及時發(fā)現(xiàn)水質(zhì)變化以及輔助發(fā)現(xiàn)水質(zhì)變化規(guī)律。
　　基于居民的投訴需求和水務(wù)部門

2、的管理需求，某市已經(jīng)成立供水服務(wù)熱線，二十年來處理了上百萬件供水投訴問題，有限的工作人員和眾多的投訴需求，既對合理答復(fù)并處理的效率提出了更高的要求，也促使投訴方式與形式更加多元化、信息化，為居民投訴提供便利;同時，投訴的問題多而復(fù)雜，這些投訴數(shù)據(jù)本身又是一種具有研究價值的數(shù)據(jù)，通過對這些投訴數(shù)據(jù)進行深入的分析，可以實現(xiàn)高效的水務(wù)管理、發(fā)現(xiàn)水質(zhì)變化的規(guī)律，使居民的投訴熱線“冷”下來，城市供水水平與質(zhì)量得到大幅度提升。
　　本文基于實

3、際需求，建立了一個基于自動分詞處理的城市供水投訴管理平臺，實現(xiàn)了對大量電話錄音轉(zhuǎn)制的投訴文本數(shù)據(jù)的自動分詞、分析和可視化的展示。在本文工作中，系統(tǒng)地解決了從不同數(shù)據(jù)源數(shù)據(jù)的導(dǎo)入、管理、分詞處理、數(shù)據(jù)分析與可視化的一站式服務(wù)流程。
　　本文的主要工作包括以下幾個方面:
　　首先，針對城市供水投訴的數(shù)據(jù)來源不同，建立了基于HDFS的統(tǒng)一數(shù)據(jù)導(dǎo)入接口，可以支持頁面輸入數(shù)據(jù)、本地文件數(shù)據(jù)、服務(wù)器數(shù)據(jù)等多種來源的數(shù)據(jù)導(dǎo)入。
　　

4、第二，通過集成分詞工具，實現(xiàn)了對大量歷史投訴文本數(shù)據(jù)的分詞處理，建立了增量式供水與投訴詞典庫，并為管理者提供了詞典管理接口，方便后續(xù)對投訴詞典的維護。當用戶的投訴數(shù)據(jù)導(dǎo)入進來時，系統(tǒng)會自動根據(jù)投訴詞典為用戶的投訴內(nèi)容進行匹配，同時用戶可以對投訴結(jié)果進行滿意度評價。
　　第三，設(shè)計并實現(xiàn)了通過Java調(diào)用R服務(wù)的技術(shù)路線，在系統(tǒng)中實現(xiàn)了投訴數(shù)據(jù)的分析，并提供多種形式的可視化展示方式，針對不同的數(shù)據(jù)類型與分析結(jié)果，為用戶提供具有交互性

5、的數(shù)據(jù)可視化圖表，同時擴展了多級圖表、表級聯(lián)動等展示選擇。
　　第四，搭建了基于Web服務(wù)的城市供水投訴分析管理平臺。系統(tǒng)采用MVC架構(gòu)，數(shù)據(jù)存儲層采用基于HDFS的分布式文件存儲系統(tǒng)，易于未來與水質(zhì)大數(shù)據(jù)分析系統(tǒng)集成;實現(xiàn)了用戶投訴、投訴管理、文件管理、詞典管理、數(shù)據(jù)處理工具、可視化展示、投訴處理管理等主要模塊。
　　最后，本文實現(xiàn)的平臺為水務(wù)管理部門提供了界面友好、具有交互性的城市供水投訴管理系統(tǒng)，既滿足了用水用戶的投訴