nginx完美架構方案.doc

北京聞康集團有問必答架構調整方案及實施過程（高性能WEB系統(tǒng)） 侯在存 2010年12月第1章 調整方案概述1.1 總體概述項目目的出現(xiàn)災難迅速恢復，讓服務器的對外提供達到99.9%.項目負責人侯在存涉及機房三元橋 東四 廊坊涉及設備DELL R710 2950預計時間六個月項目階段1.數(shù)據(jù)庫應用分離 2.nginx對apache的替換3.增加memcache需增設備2臺 DELL 服務器 和 部分內存條（現(xiàn)有一臺空閑服務器）項目簡述： 項目前：club服務器有5臺名字分 ，每臺服務器跑的是AMP+nginx反向代理和負載均衡+DNS輪詢及rsync程序同步，其中的mysql都是從的（讀的數(shù)據(jù)庫）， 另外還有一臺是主數(shù)據(jù)198（寫的）+ 一臺備份數(shù)據(jù)庫做冗余205（且分擔蜘蛛抓取）。注：c1 c2 在三元橋 c3 c4在廊坊 c5在東單 項目后：三元橋的C1C2和新增的1臺服務器承擔所有的訪問，c3 c4 c5不對外提供訪問，做 c1 c2服務器 出現(xiàn)問題時的恢復冗余機和蜘蛛抓取承擔， 所有的mysql也停用做冗余用，增加一臺讀的數(shù)據(jù)庫讓 club服務器的讀數(shù)據(jù)庫都改到這臺服務器上，原來的198不變但需要增加內存。例外+一臺讀寫數(shù)據(jù)庫服務器的同步冗余機，從而實現(xiàn)服務器出現(xiàn)大災難2小時內解決，小災難半小時解決，讓服務器的對外提供達到99.9%.注：nginx+phpcgi代替amp 及對c1 c2 的優(yōu)化可以使三元橋WEB承載所有的訪問。項目影響：由于本次將服務器的web服務替換，ssi和rewrite規(guī)則支持不一樣，業(yè)務可能會中斷，需某周5到-周日的修改。第2章 調整前結構分析2.1 CLUB架構現(xiàn)狀2.1.1 CLUB架構現(xiàn)狀拓撲如圖所示：C1-C5 分別是nginx反向代理+AMP 環(huán)境且mysql 都是讀的數(shù)據(jù)與198主的寫的數(shù)據(jù)同步，C1是rsync主的程序同步其余C2-C5是從的。205是備份服務器，備份程序和數(shù)據(jù)負載蜘蛛的抓取。2.1.2 CLUB現(xiàn)在訪問關系注：每臺nginx還轉到后端其他AMP,1%的流量，rsync的連接線沒畫第3章 第一階數(shù)據(jù)庫應用分離3.1 110獨立DB服務器搭建（空閑的那臺服務器）3.1.1 裝系統(tǒng)及簡單優(yōu)化1. 裝系統(tǒng)的步驟省略 2. 優(yōu)化開機啟動服務 裝的是centos系統(tǒng)，裝完后首先優(yōu)化開機啟動服務的。Setup-系統(tǒng)服務：把不需要的服務全部關閉。3.1.2 mysql的搭建rootlocalhost houzc# wget /mysql/MySQL-5.0/mysql-5.0.89.tar.gzrootlocalhost houzc# tar -zxvf mysql-5.0.89.tar.gz -C /usr/local/src/ rootlocalhost houzc# cd /usr/local/src/mysql-5.0.89/rootlocalhost mysql-5.0.89# useradd mysql -M -s /sbin/nologinrootlocalhost mysql-5.0.89#yum -y install libtermcap-devel rootlocalhostmysql-5.0.89#./configure -prefix=/usr/local/mysql-5.0.89/ -with-unix-socket-path=/tmp/mysql.sock -localstatedir=/usr/local/mysql-5.0.89/data -without-debug /去除debug模式-enable-thread-safe-client /以線程方式編譯客戶端-enable-assembler /使用一些字符函數(shù)的匯編版本-enable-profiling /編譯一個版本帶有查詢取樣代碼-enable-community-features /停用附加功能提供的用戶社區(qū)-with-mysqld-ldflags=-all-static / 以純靜態(tài)方式編譯服務端-with-client-ldflags=-all-static / 以純靜態(tài)方式編譯客戶端 -with-charset=latin1 /默認編碼拉丁文-with-extra-charset=utf8,gbk /支持編碼的格式-with-innodb /支持innodb表-with-scv-storage-engine /使用SCV存儲引擎-with-mysqld-user=mysql /mysqld的守護進程用戶-without-embedded-server /構建嵌入式服務器-with-server-suffix=-community /附加價值版本的字符串rootlocalhost mysql-5.0.89# makerootlocalhost mysql-5.0.89# make installrootlocalhost mysql-5.0.89# ./scripts/mysql_install_db rootlocalhost mysql-5.0.89# cp support-files/f /etc/f -fvrootlocalhost mysql-5.0.89#chown -R root:mysql /usr/local/mysql-5.0.89/rootlocalhost mysql-5.0.89# chown -R mysql.mysql /usr/local/mysql-5.0.89/data/ rootlocalhost mysql-5.0.89# cd /usr/local/mysql-5.0.89/libexec/rootlocalhost libexec# cp mysql mysql.oldrootlocalhost libexec# strip mysqldrootlocalhost libexec# echo /usr/local/mysql-5.0.89/lib/mysql/ /etc/ld.so.confrootlocalhost libexec# ldconfig rootlocalhost libexec# /usr/local/mysql-5.0.89/bin/mysqld_safe &rootlocalhost libexec#ps -ef | grep mysql 驗證是否成功開啟mysql rootlocalhost libexec#/usr/local/mysql-5.0.89/bin/mysqladmin -u root password youpasswordrootlocalhost libexec#/usr/local/mysql-5.0.89/bin/mysql -u root -pEnter password: （輸入youpassword密碼） mysql show databases;+-+| Database |+-+| information_schema | | mysql | | test | +-+3 rows in set (0.00 sec)mysql quit；rootlocalhost libexec#vi /etc/rc.local /usr/local/mysql-5.0.89/bin/mysqld_safe &/平滑關閉 mysqld ：rootlocalhost data# /usr/local/mysql-5.0.89/bin/mysqladmin -u root -p shutdown Enter password: （輸入youpassword密碼）這樣mysql服務就裝完了。3.1.3 mysql的優(yōu)化1. 編譯時的優(yōu)化-static 13% -with-client-ldflags=-all-static -with-mysqld-ldflags=-all-static靜態(tài)鏈接提高13%性能 -pgcc 1% CFLAGS=-O3 -mpentiumpro -mstack-align-double CXX=gcc CXXFLAGS=-O3 -mpentiumpro -mstack-align-double -felide-constructors -fno-exceptions -fno-rtti 如果是Inter處理器，使用pgcc提高1%性能 Unix Socket 7.5% -with-unix-socket-path=/usr/local/mysql/tmp/mysql.sock使用unix套接字鏈接提高7.5%性能 -enable-assembler size=-1允許使用匯編模式(優(yōu)化性能)2. 優(yōu)化遠程連接skip-name-resolve選項就能禁用DNS解析，連接速度會快很多。不過，這樣的話就不能在MySQL的授權表中使用主機名了而只能用ip格式。設置連接數(shù)set-variable = max_connections=1000設置連接數(shù)，mysql默認的連接數(shù)是100，太少了.3. 開啟緩存機制skip-locking#取消文件系統(tǒng)的外部鎖key_buffer = 12288M #索引緩存,根據(jù)內存大小而定,如果是獨立的db服務器,可以設置高達80%的內存總量 #連接排隊列表總數(shù)back_log = 200max_allowed_packet = 10M #打開表緩存總數(shù),可以避免頻繁的打開數(shù)據(jù)表產生的開銷 table_cache = 512#每個線程排序所需的緩沖 sort_buffer_size = 16M#MyISAM表發(fā)生變化時重新排序所需的緩沖 myisam_sort_buffer_size = 64M #緩存可重用的線程數(shù) thread_cache = 128 #查詢結果緩存 query_cache_size = 128M #設置超時時間,能避免長連接 set-variable = wait_timeout=60 #最大并發(fā)線程數(shù),cpu數(shù)量*2 thread_concurrency = 16#記錄慢查詢,然后對慢查詢一一優(yōu)化log-slow-queries=/usr/local/