大型電商網站服務器架構完全部署方案

任何一個大型網站都是經歷用戶積累然后成長，從一臺服務器到多臺服務器才能構架支撐網站現有數據、用戶、頁面請求等。大型網站(如淘寶、京東等)的系統(tǒng)架構并不是開始設計就具備完整的高性能、高可用、安全等特性，它總是隨著用戶量的增加，業(yè)務功能的擴展逐漸演變完善的，在這個過程中，開發(fā)模式、技術架構、設計思想也發(fā)生了很大的變化，就連技術人員也從幾個人發(fā)展到一個部門甚至一條產品線。所以成熟的系統(tǒng)架構是隨業(yè)務擴展而完善出來的，并不是一蹴而就;不同業(yè)務特征的系統(tǒng)，會有各自的側重點，例如淘寶，要解決海量的商品信息的搜索、下單、支付，例如騰訊，要解決數億的用戶實時消息傳輸，百度它要處理海量的搜索請求，他們都有各自的業(yè)務特性，系統(tǒng)架構也有所不同。盡管如此我們也可以從這些不同的網站背景下，找出其中共用的技術，這些技術和手段可以廣泛運行在大型網站系統(tǒng)的架構中，下面就通過介紹大型網站系統(tǒng)的演化過程，來認識這些技術和手段。一、最開始的網站架構最初的架構，應用程序、數據庫、文件都部署在一臺服務器上，如圖：二、應用、數據、文件分離隨著業(yè)務的擴展，一臺服務器已經不能滿足性能需求，故將應用程序、數據庫、文件各自部署在獨立的服務器上，并且根據服務器的用途配置不同的硬件，達到最佳的性能效果。三、利用緩存改善網站性能在硬件優(yōu)化性能的同時，同時也通過軟件進行性能優(yōu)化，在大部分的網站系統(tǒng)中，都會利用緩存技術改善系統(tǒng)的性能，使用緩存主要源于熱點數據的存在，大部分網站訪問都遵循28原則(即80%的訪問請求，最終落在20%的數據上)，所以我們可以對熱點數據進行緩存，減少這些數據的訪問路徑，提高用戶體驗。而反向代理，則是部署在網站的機房，當用戶請求達到時首先訪問反向代理服務器，反向代理服務器將緩存的數據返回給用戶，如果沒有沒有緩存數據才會繼續(xù)走應用服務器獲取，也減少了獲取數據的成本。反向代理有Squid，Nginx。七、使用分布式文件系統(tǒng)用戶一天天增加，業(yè)務量越來越大，產生的文件越來越多，單臺的文件服務器已經不能滿足需求。需要分布式的文件系統(tǒng)支撐。常用的分布式文件系統(tǒng)有NFS。八、使用NoSql和搜索引擎對于海量數據的查詢，我們使用nosql數據庫加上搜索引擎可以達到更好的性能。并不是所有的數據都要放在關系型數據中。常用的NOSQL有mongodb和redis，搜索引擎有l(wèi)ucene。九、將應用服務器進行業(yè)務拆分隨著業(yè)務進一步擴展，應用程序變得非常臃腫，這時我們需要將應用程序進行業(yè)務拆分，如百度分為新聞、網頁、圖片等業(yè)務。每個業(yè)務應用負責相對獨立的業(yè)務運作。業(yè)務之間通過消息進行通信或者同享數據庫來實現。十、搭建分布式服務這時我們發(fā)現各個業(yè)務應用都會使用到一些基本的業(yè)務服務，例如用戶服務、訂單服務、支付服務、安全服務，這些服務是支撐各業(yè)務應用的基本要素。我們將這些服務抽取出來利用分部式服務框架搭建分布式服務。淘寶的Dubbo是一個不錯的選擇。大型