集群WEB代理服務(wù)器的設(shè)計(jì).pdf

1、“集群WEB代理服務(wù)器”是根據(jù)北京市科委“基于IPv6的下一代互聯(lián)網(wǎng)關(guān)鍵技術(shù)研發(fā)及產(chǎn)業(yè)化推進(jìn)”項(xiàng)目中“IPv6流媒體分發(fā)應(yīng)用支撐系統(tǒng)”的一個(gè)子系統(tǒng)且已得到了實(shí)際的應(yīng)用。由于增長的WEB服務(wù)需求產(chǎn)生了用戶體驗(yàn)與現(xiàn)有網(wǎng)絡(luò)帶寬的矛盾。提供服務(wù)的因特網(wǎng)運(yùn)營商在解決這一矛盾時(shí)，必須考慮用戶體驗(yàn)，且應(yīng)盡可能地滿足用戶。本文所提出的一種新型架構(gòu)的透明集群WEB代理服務(wù)器一般布置在運(yùn)營商局域網(wǎng)的出口。通過實(shí)際測試，發(fā)現(xiàn)這種集群透明WEB代理服務(wù)器能有效

2、地降低運(yùn)營商出口流量，并節(jié)省約8％的成本。 本論文所提出的是一種新型透明集群代理服務(wù)器。透明代理，與NAT(網(wǎng)絡(luò)地址轉(zhuǎn)換)有許多地方很相似，通常是通過對TCP報(bào)頭的攔截并纂改其報(bào)頭而得以實(shí)現(xiàn)的。處于透明代理時(shí)，用戶感覺不到代理的存在，減少了為通知用戶正確設(shè)置IP所遇到的困難。因此，采用透明代理不但使運(yùn)營商節(jié)省了費(fèi)用，也節(jié)省了用戶的時(shí)間與精力。另外，采用集群一方面盡可能地提高了其代理服務(wù)器的I/O吞吐能力與服務(wù)能力，另一方面也減少

3、了響應(yīng)時(shí)間。 在本論文的開始，先對涉及一般代理服務(wù)器及虛擬服務(wù)器體系架構(gòu)的術(shù)語及相關(guān)協(xié)議進(jìn)行了必要的介紹，對單節(jié)點(diǎn)代理服務(wù)器所涉及的關(guān)鍵技術(shù)及基于IP地址的Round-Robin負(fù)載均衡等調(diào)度算法也做了介紹。由于集群中前端節(jié)點(diǎn)每秒會對數(shù)萬個(gè)TCP包進(jìn)行攔截與分析，并會向LBE產(chǎn)生頻繁的查詢操作，所以采用了epoll異步驅(qū)動機(jī)制，以提高其響應(yīng)速度，減輕前端節(jié)點(diǎn)的壓力。通過對不同的服務(wù)架構(gòu)與事件驅(qū)動機(jī)制的分析，本文構(gòu)架了遵循HTFP

4、標(biāo)準(zhǔn)的高性能集群代理服務(wù)器，并在Linux平臺上實(shí)現(xiàn)了其基本功能。系統(tǒng)各模塊運(yùn)行在一個(gè)基于異步事件驅(qū)動的系統(tǒng)運(yùn)行框架之上。根據(jù)Linux2.6內(nèi)核特性，利用其提供統(tǒng)一的事件的登記和回調(diào)接口，所有的操作都是通過登記事件，然后在檢測到異步事件時(shí)回調(diào)相應(yīng)的處理函數(shù)，整個(gè)過程都是異步的。另外，為了獲得高性能，在設(shè)計(jì)上采用了HASH散列技術(shù)，內(nèi)存池及線程池技術(shù)，提高了對磁盤文件的搜索與傳輸速度。在論文的后半部分對詳細(xì)設(shè)計(jì)與實(shí)現(xiàn)以及其實(shí)現(xiàn)的一些缺點(diǎn)