大流量、高并發(fā)的網站的底層系統(tǒng)架構

大流量、高并發(fā)的網站的底層系統(tǒng)架構動態(tài)應用，是相對于網站靜態(tài)內容而言，是指以c/c++、php、Java、perl、.net等服務器端語言開發(fā)的網絡應用軟件，比如論壇、網絡相冊、交友、BLOG等常見應用。動態(tài)應用系統(tǒng)通常與數(shù)據(jù)庫系統(tǒng)、緩存系統(tǒng)、分布式存儲系統(tǒng)等密不可分。大型動態(tài)應用系統(tǒng)平臺主要是針對于大流量、高并發(fā)網站建立的底層系統(tǒng)架構。大型網站的運行需要一個可靠、安全、可擴展、易維護的應用系統(tǒng)平臺做為支撐，以保證網站應用的平穩(wěn)運行。大型動態(tài)應用系統(tǒng)又可分為幾個子系統(tǒng)：l

Web前端系統(tǒng)l

負載均衡系統(tǒng)l

數(shù)據(jù)庫集群系統(tǒng)l

緩存系統(tǒng)l

分布式存儲系統(tǒng)l

分布式服務器管理系統(tǒng)l

代碼分發(fā)系統(tǒng)Web前端系統(tǒng)結構圖：

為了達到不同應用的服務器共享、避免單點故障、集中管理、統(tǒng)一配置等目的，不以應用劃分服務器，而是將所有服務器做統(tǒng)一使用，每臺服務器都可以對多個應用提供服務，當某些應用訪問量升高時，通過增加服務器節(jié)點達到整個服務器集群的性能提高，同時使他應用也會受益。該Web前端系統(tǒng)基于Apache/Lighttpd/Eginx等的虛擬主機平臺，提供PHP程序運行環(huán)境。服務器對開發(fā)人員是透明的，不需要開發(fā)人員介入服務器管理負載均衡系統(tǒng)

緩存分為文件緩存、內存緩存、數(shù)據(jù)庫緩存。在大型Web應用中使用最多且效率最高的是內存緩存。最常用的內存緩存工具是Memcachd。使用正確的緩存系統(tǒng)可以達到實現(xiàn)以下目標：1、

使用緩存系統(tǒng)可以提高訪問效率，提高服務器吞吐能力，改善用戶體驗。2、

減輕對數(shù)據(jù)庫及存儲集服務器的訪問壓力3、Memcached服務器有多臺，避免單點故障，提供高可靠性和可擴展性，提高性能。分布式存儲系統(tǒng)結構圖：

WEB系統(tǒng)平臺中的存儲需求有下面兩個特點：1)存儲量很大，經常會達到單臺服務器無法提供的規(guī)模，比如相冊、視頻等應用。因此需要專業(yè)的大規(guī)模存儲系統(tǒng)。2)負載均衡cluster中的每個節(jié)點都有可能訪問任何一個數(shù)據(jù)對象，每個節(jié)點對數(shù)據(jù)的處理也能被其他節(jié)點共享，因此這些節(jié)點要操作的數(shù)據(jù)從邏輯上看只能是一個整體，不是各自獨立的數(shù)據(jù)資源。因此高性能的分布式存儲系統(tǒng)對于大型網站應用來說是非常重要的一環(huán)。（這個地方需要加入對某個分布式存儲系統(tǒng)的簡單介紹。）分布式服務器管理系統(tǒng)結構圖：

隨著網站訪問流量的不斷增加，大多的網絡服務都是以負載均衡集群的方式對外提供服務，隨之集群規(guī)模的擴大，原來基于單機的服務器管理模式已經不能夠滿足我們的需求，新的需求必須能夠集中式的、分組的、批量的、自動化的對服務器進行管理，能夠批量化的執(zhí)行計劃任務。在分布式服務器管理系統(tǒng)軟件中有一些比較優(yōu)秀的軟件，其中比較理想的一個是Cfengine。它可以對服務器進行分組，不同的分組可以分別定制系統(tǒng)配置文件、計劃任務等配置。它是基于C/S結構的，所有的服務器配置和管理腳本程序都保存在CfengineServer上，而被管理的服務器運行著CfengineClient程序，CfengineClient通過SSL加密的連接定期的向服務器端發(fā)送請求以獲取最新的配置文件和管理命令、腳本程序、補丁安裝等任務。有了Cfengine這種集中式的服務器管理工具，我們就可以高效的實現(xiàn)大規(guī)模的服務器集群管理，被管理服務器和CfengineServer可以分布在任何位置，只要網絡可以連通就能實現(xiàn)快速自動化的管理。代碼發(fā)布系統(tǒng)結構圖：

隨著網站訪問流量的不斷增加，大多的網絡服務都是以負載均衡集群的方式對外提供服務，隨之集群規(guī)模的擴大，為了滿足集群環(huán)境下程序代碼的批量分發(fā)和更新，我們還需要一個程序代碼發(fā)布系統(tǒng)。這個發(fā)布系統(tǒng)可以幫我們實現(xiàn)下面的目標：1)生產環(huán)境的服務器以虛擬主機方式提供服務，不需要開發(fā)人員介入維護和直接操作，提供發(fā)布系統(tǒng)可以實現(xiàn)不需要登陸服務器就能把程序分發(fā)到目標服務器。2)我們要實現(xiàn)內部開發(fā)、內部測試、生產環(huán)境測試、生產環(huán)境發(fā)布的4個開發(fā)階段的管理，發(fā)布系