基于大數(shù)據(jù)的新聞管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf

1、在投行的金融交易中，證券數(shù)據(jù)的及時(shí)有效性非常重要。雷達(dá)公司致力于提供投行系統(tǒng)數(shù)據(jù)交互的后臺(tái)支持，其信息系統(tǒng)中下游的多個(gè)不同的金融子系統(tǒng)需要獲取實(shí)時(shí)的上游證券數(shù)據(jù)中心的最新數(shù)據(jù)。這些子系統(tǒng)相互獨(dú)立，對(duì)數(shù)據(jù)內(nèi)容的需求不同，上游證券數(shù)據(jù)中心只能實(shí)時(shí)的把數(shù)據(jù)發(fā)送到支持JMS(Java MessageService)的TIBCO Software的EMS(Enterprise Message Service)產(chǎn)品的消息堆棧，每個(gè)下游子系統(tǒng)通過連接

2、到JMS創(chuàng)建持久化實(shí)例消費(fèi)數(shù)據(jù)。龐大的數(shù)據(jù)量以及眾多的實(shí)例給JMS服務(wù)器造成嚴(yán)重負(fù)擔(dān)。一旦下游子系統(tǒng)出現(xiàn)故障，就會(huì)造成JMS服務(wù)器大量數(shù)據(jù)空間被占用。若刪除實(shí)例，之前堆積在堆棧實(shí)例中的數(shù)據(jù)便會(huì)丟失。倘若讓上游系統(tǒng)重新發(fā)送，則又會(huì)造成其他子系統(tǒng)重復(fù)消費(fèi)已處理的老數(shù)據(jù)。如何實(shí)現(xiàn)一個(gè)數(shù)據(jù)處理中間件系統(tǒng)來緩解JMS服務(wù)器的壓力并保證下游用戶消費(fèi)數(shù)據(jù)的穩(wěn)定性變得尤為重要。
　　首先通過對(duì)雷達(dá)公司的證券數(shù)據(jù)管理的需求調(diào)研，獲取其上游SMC(S

3、ecurityMessage Center)和下游數(shù)據(jù)訂閱結(jié)點(diǎn)存在的問題，以明確引入新的金融數(shù)據(jù)緩存中間件的必要性。在此基礎(chǔ)上，討論數(shù)據(jù)分發(fā)系統(tǒng)的訂閱分發(fā)功能，分析從消息訂閱、數(shù)據(jù)緩存處理、到下游分發(fā)的核心消息消費(fèi)分發(fā)處理流程。分析基于DDS(Data Distribution Service)的數(shù)據(jù)分發(fā)系統(tǒng)框架，針對(duì)數(shù)據(jù)建立有效的緩存?zhèn)}庫模型、實(shí)現(xiàn)高效并個(gè)性化的客戶消息分發(fā)需求，同時(shí)設(shè)計(jì)提供數(shù)據(jù)客戶狀態(tài)的實(shí)時(shí)監(jiān)控可視化界面。重點(diǎn)在于討