基于WebService數(shù)據(jù)上報(bào)系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、大數(shù)據(jù)技術(shù)是指從各種各樣類型的巨量數(shù)據(jù)中，快速獲得有價(jià)值信息的技術(shù)。大數(shù)據(jù)不是簡(jiǎn)單的數(shù)據(jù)量大，而最重要的是對(duì)大數(shù)據(jù)進(jìn)行分析，只有通過(guò)分析才能獲取更多智能的、深入的、有價(jià)值的信息。大數(shù)據(jù)的具體處理方法很多，整個(gè)處理流程可以概括為四步，分別是采集、導(dǎo)入和預(yù)處理、統(tǒng)計(jì)和分析及數(shù)據(jù)挖掘，從而為客戶應(yīng)用在技術(shù)上提供可靠、高效的解決方案，為客戶提供精準(zhǔn)的營(yíng)銷數(shù)據(jù)依據(jù)，帶來(lái)更大的經(jīng)濟(jì)效益。
　　本文是在一個(gè)客戶需求基礎(chǔ)是進(jìn)行研究的，此客戶是比較

2、典型大數(shù)據(jù)應(yīng)用的案例，集團(tuán)化的數(shù)據(jù)管理中心，異構(gòu)化的分支機(jī)構(gòu)，每天都涉及進(jìn)、銷、存等交易記錄，每個(gè)分支機(jī)構(gòu)都是獨(dú)立管理系統(tǒng)，集團(tuán)需要采集到每個(gè)機(jī)構(gòu)這些當(dāng)天交易數(shù)據(jù)，在公司當(dāng)前無(wú)專網(wǎng)的情況下，如何采集到這些數(shù)據(jù)，是面臨的重要難題，也是決定項(xiàng)目成敗的關(guān)鍵，在此前提下，針對(duì)數(shù)據(jù)上報(bào)采集技術(shù)難題作為本次研究的重點(diǎn)。數(shù)據(jù)采集技術(shù)受限于網(wǎng)絡(luò)環(huán)境，在分析過(guò)程中考慮過(guò)郵件方式上報(bào)，也考慮過(guò)ftp服務(wù)器方式，也考慮過(guò)直接訪問(wèn)數(shù)據(jù)庫(kù)的方式，這些都存在各種各

3、樣的問(wèn)題，如自動(dòng)化程度不高、網(wǎng)絡(luò)不穩(wěn)定情況下數(shù)據(jù)續(xù)傳不完整、數(shù)據(jù)安全性低等等，最后經(jīng)過(guò)論證采用WebService作為整個(gè)系統(tǒng)實(shí)現(xiàn)數(shù)據(jù)交換的技術(shù)。此技術(shù)可以操作的分布式應(yīng)用程序，使用HTTP和XML進(jìn)行通信具有普遍性，另外Web Service可以穿越防火墻，真正的自由通信，而且通過(guò) SOAP協(xié)議實(shí)現(xiàn)異地調(diào)用，這些都是在現(xiàn)有現(xiàn)狀下最合適的技術(shù)選型。介紹了系統(tǒng)需求、系統(tǒng)設(shè)計(jì)、關(guān)鍵技術(shù)研究及系統(tǒng)功能實(shí)現(xiàn)等，同時(shí)本文還對(duì)系統(tǒng)的開(kāi)發(fā)過(guò)程、測(cè)試方