基于storm的實(shí)時(shí)物流數(shù)據(jù)查詢系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn).pdf

1、基于物聯(lián)網(wǎng)的智慧物流是在物流配送中集成智能化技術(shù)，它為物流管理提供豐富的管理信息，使物流能夠具有思維，感知，分析學(xué)習(xí)和自動解決配送中的問題的能力，從而高效，快捷，方便地存儲和運(yùn)輸貨物。隨著物流功能的擴(kuò)展，傳統(tǒng)物流管理系統(tǒng)存在以下不足。（1）智能物流通過傳感器將物流貨物的溫度信息，濕度信息等詳細(xì)信息實(shí)時(shí)傳送至服務(wù)器端供用戶查詢，物流信息的數(shù)據(jù)量開始爆炸式地增長，而傳統(tǒng)物流管理系統(tǒng)存在單節(jié)點(diǎn)運(yùn)算的性能瓶頸，無法處理物流管理中產(chǎn)生的海量數(shù)據(jù)。

2、（2）物流數(shù)據(jù)源源不斷地產(chǎn)生，具有無限性，實(shí)時(shí)性，多樣性等特點(diǎn)，人們對于物流數(shù)據(jù)處理的方式趨向于實(shí)時(shí)化，個(gè)性化查詢，傳統(tǒng)的物流信息管理系統(tǒng)無法滿足人們對實(shí)時(shí)的多樣化的物流數(shù)據(jù)查詢的需要。本論文針對以上問題，調(diào)研推特公司推出的storm實(shí)時(shí)分布式流處理平臺和斯坦福大學(xué)的數(shù)據(jù)流管理系統(tǒng)stream，針對實(shí)時(shí)的物流數(shù)據(jù)處理設(shè)計(jì)實(shí)現(xiàn)了基于storm的實(shí)時(shí)物流數(shù)據(jù)查詢系統(tǒng)，主要進(jìn)行了如下的研究實(shí)現(xiàn)工作。
　　首先，論文設(shè)計(jì)了結(jié)構(gòu)化持續(xù)查詢語

3、言CSQL（Continues Struct Query Language），并基于開源工具antlr開發(fā)該語言的詞法語法解析器。CSQL選取了stream系統(tǒng)中的持續(xù)查詢語言CQL（Continues Query Language）中支持監(jiān)控的查詢語句，并結(jié)合SQL(Struct Query Language)的語法規(guī)則做了相應(yīng)的簡化，并通過antlr開發(fā)了詞法和語法分析工具，對于錯(cuò)誤的關(guān)鍵字詞提示詞法錯(cuò)誤信息，同時(shí)對語法有錯(cuò)誤的語句

4、提示語法錯(cuò)誤信息，從而使數(shù)據(jù)管理員能夠使用簡單的查詢語句實(shí)現(xiàn)復(fù)雜的數(shù)據(jù)分析功能。
　　其次，論文完成了實(shí)時(shí)物流查詢系統(tǒng)中以下三個(gè)關(guān)鍵模塊的設(shè)計(jì)與編碼工作。（1）對查詢語句的語義提取。（2）邏輯計(jì)劃生成。（3）物理拓?fù)涮峤弧τ谕ㄟ^詞法和語法解析的正確查詢語句，服務(wù)器對于該語句進(jìn)行語義的提取，并結(jié)合語義生成邏輯計(jì)劃，通過算子優(yōu)先級選擇、組合、調(diào)度算子集中的算子，優(yōu)化邏輯計(jì)劃，最終生成物理執(zhí)行拓?fù)洌峤恢羢torm平臺運(yùn)行。從而使不熟