性能測試知多少---系統架構分析
之前有對性能需求進行過分析,那篇主要從項目業務、背景等角度如何抽絲剝繭的將項目的需求抽離出來。在我們進行需求的時候也需要對被測項目的架構有一定的認識,如果不了解被測系統的架構,那么在后期的性能分析與調優階段將無從下手。
簡單系統架構介紹
因為每個公司的業務不同,采用的技術,架構也都有很大不同。但不管怎么變動,但基本都在三層架構的基礎上擴展與改進。
下面看一個基本的系統架構:
表示層:
表示層運行在客戶終端上,運行java applet 程序,提供協議控制和用戶界面,與系統用戶實現直接交互,通過TCP/HTTP協議與業務層系統通信,向應用層系統發送請求報文,并接收應用層系統返回的回應報文。
業務邏輯層:
業務邏輯層作為中間層實現核心業務邏輯服務。
應用服務器主要運行中間件系統,中間件系統系統作為一個容器來運行各種應用軟件系統。前臺發來的請求報文通過中間件傳遞給應用程序,應用程序在處理的過程中調用數據層的數據服務器,數據服務器將查詢的數據返回給應用程序,應用軟件處理完成后通過中間件系統返回給客戶端。
在大型的系統中,可以對應用系統進行拆分,比如拆分成交易服務,查詢服務;或者通過負載均衡技術,來分散客戶端發來的請求,使其能承受更大的用戶訪問量。
數據層:
數據層運行在數據庫主機上,負責整個系統中數據信息的存儲。運行數據庫服務程序,查詢通過JDBC與應用程序進行通信,主要用于存儲數據與提供數據查詢等服務。
數據庫集群技術就是對大型系統應用非常廣泛的一種解決方案。
大型系統架構介紹
前面介紹了一般系統的架構,那么一個大型的系統在設計中使用了哪些手段或技術來提高系統的性能呢
Web服務器
Web服務器即中間件服務器,是應用程序的載體(容器),應用程序只有在中間件服務器上才能正常的運行被外界所訪問使用。對于window系統來說,IIS是微軟配套的web服務器,他們的搭配應該是夫妻是之間的默契;apache 作為開源力量代表,不管在windows還是linux下面都非常得寵。因為linux與apache 都為開源產品且性能優異,應用非常廣泛。
· 淘寶網(阿里巴巴): Linux操作系統 + Web 服務器: Apache
· 新浪:FreeBSD + Web 服務器:Apache
· Yahoo:FreeBSD + Web 服務器:自己的
· Google: 部分Linux + Web 服務器:自己的
· 百度:Linux + Web 服務器: Apache
· 網易:Linux + Web 服務器: Apache
· eBay: Windows Server 2003/8 (大量) + Web 服務器:Microsoft IIS
· MySpace: Windows Server 2003/8 + Web 服務器:Microsoft IIS
常用的系統架構是:
· Linux + Apache + PHP + MySQL
· Linux + Apache + Java (WebSphere) + Oracle
· Windows Server 2003/2008 + IIS + C#/ASP.NET + 數據庫
· Window Server 2003/2008 + tomcat + MySql
提高系統性能的相關技術
網頁HTML 靜態化
其實大家都知道網頁靜態化,效率最高,消耗最小的就是純靜態化的 html 頁面,所以我們盡可能使我們的網站上的頁面采用靜態頁面來實現,這個最簡單的方法其實也是最有效的方法。
但是對于大量內容并且頻繁更新的網站,我們無法全部手動去挨個實現,于是出現了我們常見的信息發布系統 CMS,像我們常訪問的各個門戶站點的新聞頻道,甚至他們的其他頻道,都是通過信息發布系統來管理和實現的,信息發布系統可以實現最簡單的信息錄入自動生成靜態頁面,還能具備頻道管理,權限管理,自動抓取等功能,
對于一個大型網站來說,擁有一套高效,可管理的
對于系統中頻繁使用數據庫查詢但是內容更新很小的應用,可以考慮使用 html 靜態化來實現,比如論壇中論壇的公用設置信息,這些信息目前的主流論壇都 可以進行后臺管理并且存儲再數據庫中,這些信息其實大量被前臺程序調用,但是更新頻率很小,可以 考慮將這部分內容進行后臺更新的時候進行靜態化,這樣避免了大量的數據庫訪問請求;
圖片服務器分離
對
數據庫集群和庫表散列
大型網站都有復雜的應用,這些應用必須使用數據庫,那么在面對大量訪問的時候,數據庫的瓶頸很快就能顯現出來,這時一臺數據庫將很快無法滿足應用,于是我們需要使用數據庫集群或者庫表散列。
在數據庫集群方面, 很多數據庫都有自己的解決方案, Oracle, Sybase 等都有很好的方案,常用的 MySQL 提供的 Master/Slave 也是類似的方案,您使用了什么樣的 DB,就參考相應的解決方案來實施即可。
上面提到的數據庫集群由于在架構,成本,擴張性方面都會受到所采用 DB 類型的限制,于是我們需要從應用程序的角度來考慮改善系統架構,庫表散列是常用并且最有效的解決方案,我們在應用程序中安裝 業務和應用或者功能模塊將數據庫進行分離,不同的模塊對應不同的數據庫或者表,再按照一定的策略 對某個頁面或者功能進行更小的數據庫散列,比如用戶表,按照用戶 ID 進行表散列,這樣就能夠低成本 的提升系統的性能并且有很好的擴展性,sohu 的論壇就是采用了這樣的架構,將論壇的用戶,設置,帖 子等信息進行數據庫分離,然后對帖子,用戶按照板塊和 ID 進行散列數據庫和表,最終可以在配置文件 中進行簡單的配置便能讓系統隨時增加一臺低成本的數據庫進來補充系統性能;
緩存
緩存一詞搞技術的都接觸過,很多地方用到緩存,網站架構和網站開發中的緩存也是非常重要,這里先 講述最基本的兩種緩存,高級和分布式的緩存在后面講述, 架構方面的緩存,對
鏡像
鏡像是大型網站常采用的提高性能和數據安全性的方式,鏡像的技術可以解決不同網絡接入商和地域帶來的用戶訪問速度差異, 比如 ChinaNet 和 EduNet 之間的差異就促使了很多網站在教育網內搭建鏡像站點,數據進行定時更新或者實時更新,在鏡像的細節技術方面,這里不闡述太深,有很多專業的現成的解決 架構和產品可選,也有廉價的通過軟件實現的思路,比如 Linux 上的 rsync 等工具;
負載均衡
負載均衡將是大型網站解決高負荷訪問和大量并發請求采用的終極解決辦法,負載均衡技術發展了多年,有很多專業的服務提供商和產品可以選擇,下面介紹幾種常見的負載均衡。
1、基于DNS的負載均衡--一個域名綁定多個IP
這種技術的優點是,實現簡單、實施容易、成本低、適用于大多數TCP/IP應用;但是,其缺點也非常明顯,首先這種方案不是真正意義上的負載均衡,DNS 服務器將Http請求平均地分配到后臺的Web服務器上,而不考慮每個Web服務器當前的負載情況;如果后臺的Web服務器的配置和處理能力不同,最慢的 Web服務器將成為系統的瓶頸,處理能力強的服務器不能充分發揮作用;其次未考慮容錯,如果后臺的某臺Web服務器出現故障,DNS服務器仍然會把DNS 請求分配到這臺故障服務器上,導致不能響應客戶端。最后一點是致命的,有可能造成相當一部分客戶不能享受Web服務,并且由于DNS緩存的原因,所造成的后果要持續相當長一段時間(一般DNS的刷新周期約為24小時)。所以在國外最新的建設中心Web站點方案中,已經很少采用這種方案了。
2、通過硬件四層交換實現負載均衡
在硬件四層交換產品領域,有一些知名的產品可以選擇,比如Alteon、F5等,這些產品很昂貴,但是物有所值,能夠提供非常優秀的性能和很靈活的管理能力。Yahoo中國當初接近2000臺服務器使用了三四臺Alteon就搞定了
3、通過軟件四層交換實現負載均衡
軟件四層交換我們可以使用Linux上常用的LVS來解決,LVS就是Linux Virtual Server,他提供了基于心跳線heartbeat的實時災難應對解決方案,提高系統的魯棒性,同時可供了靈活的虛擬VIP配置和管理功能,可以同時滿足多種應用需求,這對于分布式的系統來說必不可少。
一個典型的使用負載均衡的策略就是,在軟件或者硬件四層交換的基礎上搭建squid集群,這種思路在很多大型網站包括搜索引擎上被采用,這樣的架構低成本、高性能還有很強的擴張性。
4、通過反向代理服務器實現負載均衡
反向代理服務器又稱為 WEB 加速服務器,它位于 WEB 服務器的前端,充當WEB服務器的內容緩存器,反向代理服務器是針對 WEB 服務器設置的,后臺 WEB 服務器對互聯網用戶是透明的,用戶只能看到反向代理服務器的地址,不清楚后臺 WEB 服務器是如何組織架構的。當互聯網用戶請求 WEB 服務時,DNS 將請求的域名解析為反向代理服務器的 IP 地址,這樣 URL 請求將被發送到反向代理服務器,由反向代理服務器負責處理用戶的請求與應答、與后臺 WEB 服務器交互。利用反向代理服務器減輕了后臺 WEB 服務器的負載,提高了訪問速度,同時避免了因用戶直接與 WEB 服務器通信帶來的安全隱患。
-------------------------------------
這篇文章非常糾結,以目前技術水平來講這塊的東西實屬班門弄斧。部分內容從互聯網搜集。
相關鏈接:
posted on 2012-10-17 09:35 順其自然EVO 閱讀(288) 評論(0) 編輯 收藏 所屬分類: 性能測試