前言
:
在PHP+MySQL架構的站點中,本文重點從MySQL的角度去分析如何使Discuz!論壇(或者類似的PHP+MySQL架構的程序)應對大訪問量。同時給出一些使用Memcache去減輕MySQL壓力的建議。其中很多數據是個人測試的結果,如有不同意見,敬請留言告之。另外由于個人思維的問題,行文比較跳躍,特此聲明!
系統分析
:
單純的從MySQL的角度出發,單臺MySQL的數據庫負載到每天上億次的操作(每秒大概1100次MySQL操作,然后乘以86400)應該不是非常困難的事情。按照這個數據也就是說一個單MySQL服務器的論壇來說可以跑到2千萬PV是不成問題的,我相信國內絕大部分的論壇都不可能做到每天2千萬的PV,但實際情況并不是如此。當論壇PV超過百萬的時候一臺WEB早已經不堪重負了。
就我手頭的一些數據顯示,目前的Discuz!論壇的基本服務器架構是前面Squid頂著,后面才是一臺DB在撐著。這種架構中,web服務器壓力增大可以通過并行增加服務器解決,而MySQL壓力卻無處釋放,在不考慮MySQL官方服務的情況下,我們通過合理的利用Memcache是可以達到減輕MySQL服務器負載的。
可能會有朋友說我們可以對數據表進行分表( 注:此處分表是指通過PHP程序去分表,比如pw,dv的分表 )處理,但是當前的情況是一臺DB服務器已經不能支撐當前的數據處理了,通過PHP對MySQL進行的分表依然不能減輕MySQL的負載。( 注:本段文字針對已經成型的系統,如果是獨立開發的系統在架構前期就進行數據的同步分區還是不錯的。 )
還可能有朋友會說利用MySQL的主從構架,如果你提出這個問題,我就很明確的告訴你,回去看看手冊吧。在Mysql Master/Slave 模式中,Slave主要是來備份數據的,只有當Master出現故障時,Slave才會接過Master的服務,對外部請求進行處理,直到Master恢復正常。就是說: 在Master/Slave中,要么是Master在服務,要么是Slave在服務,不會Master/Slave同時提供服務。 使用MySQL主從依然不能有效的降低MySQL的負載。
或許你又會問我為什么不使用MySQL集群(MySQL Cluster),那可是白花花的銀子啊,同等金錢的付出下,獲得最大的收益才是王道。PS:說句題外話,MySQL手冊中將MySQL集群解釋為MySQL簇,不習慣。
其實在MySQL5.1中的MySQL分區(MySQL Partition)是個很好的東西,它允許根據可以設置為任意大小的規則,跨文件系統分配單個表的多個部分。實際上,表的不同部分在不同的位置被存儲為單獨的表。我認為這個才是當前情況下,最積極有效的降低MySQL負載的 解決方法之一 。但是遺憾的是,這種MySQL分區的方式我個人沒有使用過的經歷,也不見有相當充分的案例表明它是穩定的或者不穩定的。所以我還在徘徊中。如果你知道,請麻煩告之!有朋友說騰訊是在用MySQL分區,但是遺憾的是我沒有得到確切的數據。
好了分析總結了這么多種降低MySQL負載的方式之后,在用戶環境需求等特定條件下,我得出結論在當前情況下,緩解Discuz!論壇的MySQL負載比較有效的方法就是使用Memcache!
?
使用Memcache的理由
:
1.Web Server(Lighttpd、Nginx據說都比Apache效率高好多,大家可以試用下)對CPU要求高,對內存要求低;而Memcached Server是對CPU要求低,對內存要求高,所以可以搭配使用。在對前端的Web Server上安裝Memcached Server是可行的。
2.金錢金錢金錢,最少的付出,獲得最大的收益。
3.簡單簡單簡單,對于一個架構合理的系統來說,添加Memcache的支持可能只是一個批量處理文件的過程
Discuz!使用Memcache
1.在config.inc.php中增加
$memcacheport = 11211;
$memcachelife = 60;
2.在include/common.inc.php中
$mem->connect($memcachehost, $memcacheport);
3.修改include/db_mysql.class.php中的fetch_array、query這兩個方法,并添加query_mysql方法,代碼如下:
return is_resource($query) ? mysql_fetch_array($query, $result_type) : $query[0];
}
function query_memcache($sql, $type = '') {
global $mem,$memcachelife;
$key = md5($sql);
if(!($query = $mem->get($key))) {
$query = $this->query($sql, $type);
while($item? = $this->fetch_array($query)) {
$res[] = $item;
}
$query = $res;
$mem->set($key, $query , 0, $memcachelife);
}
return $query;
}
function query($sql, $type = '') {
global $debug, $discuz_starttime, $sqldebug, $sqlspenttimes;
$func = $type == 'UNBUFFERED' && @function_exists('mysql_unbuffered_query') ?
'mysql_unbuffered_query' : 'mysql_query';
if(!($query = $func($sql, $this->link)) && $type != 'SILENT') {
$this->halt('MySQL Query Error', $sql);
}
if(substr($sql, 0, 6) == 'SELECT') {
echo '<font color="red">Cache SQL</font>:<font color="green">'.$sql.'</font><br /><br />';
} else {
echo '<font color="red">Flash SQL</font>:<font color="green">'.$sql.'</font><br /><br />';
}
$this->querynum++;
return $query;
}
4.將需要使用Memcache緩存的SQL查詢的代碼由
修改為
注意并將
修改為
沒有while的$db->fetch_array可以不用修改。
下面代碼有用得著的就拿去:
回頭放出個小工具批量替換下就可以了。
在EditPlus中可以這樣替換:while\([$](.*) = [$]db->fetch_array\([$]query\)\)替換為foreach($query as $\1)
5.完成了,測試吧!~
參考資料
:
對Memcached有疑問的朋友可以參考下列文章:
Linux下的Memcache安裝
:http://www.ccvita.com/257.html
Windows下的Memcache安裝
:http://www.ccvita.com/258.html
Memcache基礎教程
:http://www.ccvita.com/259.html
Discuz!的Memcache緩存實現
:http://www.ccvita.com/261.html
Memcache協議中文版
:http://www.ccvita.com/306.html
Memcache分布式部署方案
:http://www.ccvita.com/395.html
更多文章、技術交流、商務合作、聯系博主
微信掃碼或搜索:z360901061

微信掃一掃加我為好友
QQ號聯系: 360901061
您的支持是博主寫作最大的動力,如果您喜歡我的文章,感覺我的文章對您有幫助,請用微信掃描下面二維碼支持博主2元、5元、10元、20元等您想捐的金額吧,狠狠點擊下面給點支持吧,站長非常感激您!手機微信長按不能支付解決辦法:請將微信支付二維碼保存到相冊,切換到微信,然后點擊微信右上角掃一掃功能,選擇支付二維碼完成支付。
【本文對您有幫助就好】元
