|
前言:
在php+MySQL架構(gòu)的站點(diǎn)中,本文重點(diǎn)從MySQL的角度去分析如何使Discuz!論壇(或者類似的php+MySQL架構(gòu)的程序)應(yīng)對(duì)大訪問(wèn)量。同時(shí)給出一些使用Memcache去減輕MySQL壓力的建議。其中很多數(shù)據(jù)是個(gè)人測(cè)試的結(jié)果,如有不同意見(jiàn),敬請(qǐng)留言告之。另外由于個(gè)人思維的問(wèn)題,行文比較跳躍,特此聲明!
系統(tǒng)分析:
單純的從MySQL的角度出發(fā),單臺(tái)MySQL的數(shù)據(jù)庫(kù)負(fù)載到每天上億次的操作(每秒大概1100次MySQL操作,然后乘以86400)應(yīng)該不是非常困難的事情。按照這個(gè)數(shù)據(jù)也就是說(shuō)一個(gè)單MySQL服務(wù)器的論壇來(lái)說(shuō)可以跑到2千萬(wàn)PV是不成問(wèn)題的,我相信國(guó)內(nèi)絕大部分的論壇都不可能做到每天2千萬(wàn)的PV,但實(shí)際情況并不是如此。當(dāng)論壇PV超過(guò)百萬(wàn)的時(shí)候一臺(tái)WEB早已經(jīng)不堪重負(fù)了。
就我手頭的一些數(shù)據(jù)顯示,目前的Discuz!論壇的基本服務(wù)器架構(gòu)是前面Squid頂著,后面才是一臺(tái)DB在撐著。這種架構(gòu)中,web服務(wù)器壓力增大可以通過(guò)并行增加服務(wù)器解決,而MySQL壓力卻無(wú)處釋放,在不考慮MySQL官方服務(wù)的情況下,我們通過(guò)合理的利用Memcache是可以達(dá)到減輕MySQL服務(wù)器負(fù)載的。
可能會(huì)有朋友說(shuō)我們可以對(duì)數(shù)據(jù)表進(jìn)行分表(注:此處分表是指通過(guò)php程序去分表,比如pw,dv的分表)處理,但是當(dāng)前的情況是一臺(tái)DB服務(wù)器已經(jīng)不能支撐當(dāng)前的數(shù)據(jù)處理了,通過(guò)php對(duì)MySQL進(jìn)行的分表依然不能減輕MySQL的負(fù)載。(注:本段文字針對(duì)已經(jīng)成型的系統(tǒng),如果是獨(dú)立開(kāi)發(fā)的系統(tǒng)在架構(gòu)前期就進(jìn)行數(shù)據(jù)的同步分區(qū)還是不錯(cuò)的。)
還可能有朋友會(huì)說(shuō)利用MySQL的主從構(gòu)架,如果你提出這個(gè)問(wèn)題,我就很明確的告訴你,回去看看手冊(cè)吧。在Mysql Master/Slave 模式中,Slave主要是來(lái)備份數(shù)據(jù)的,只有當(dāng)Master出現(xiàn)故障時(shí),Slave才會(huì)接過(guò)Master的服務(wù),對(duì)外部請(qǐng)求進(jìn)行處理,直到Master恢復(fù)正常。就是說(shuō):在Master/Slave中,要么是Master在服務(wù),要么是Slave在服務(wù),不會(huì)Master/Slave同時(shí)提供服務(wù)。使用MySQL主從依然不能有效的降低MySQL的負(fù)載。
或許你又會(huì)問(wèn)我為什么不使用MySQL集群(MySQL Cluster),那可是白花花的銀子啊,同等金錢(qián)的付出下,獲得最大的收益才是王道。PS:說(shuō)句題外話,MySQL手冊(cè)中將MySQL集群解釋為MySQL簇,不習(xí)慣。
其實(shí)在MySQL5.1中的MySQL分區(qū)(MySQL Partition)是個(gè)很好的東西,它允許根據(jù)可以設(shè)置為任意大小的規(guī)則,跨文件系統(tǒng)分配單個(gè)表的多個(gè)部分。實(shí)際上,表的不同部分在不同的位置被存儲(chǔ)為單獨(dú)的表。我認(rèn)為這個(gè)才是當(dāng)前情況下,最積極有效的降低MySQL負(fù)載的解決方法之一。但是遺憾的是,這種MySQL分區(qū)的方式我個(gè)人沒(méi)有使用過(guò)的經(jīng)歷,也不見(jiàn)有相當(dāng)充分的案例表明它是穩(wěn)定的或者不穩(wěn)定的。所以我還在徘徊中。如果你知道,請(qǐng)麻煩告之!有朋友說(shuō)騰訊是在用MySQL分區(qū),但是遺憾的是我沒(méi)有得到確切的數(shù)據(jù)。
好了分析總結(jié)了這么多種降低MySQL負(fù)載的方式之后,在用戶環(huán)境需求等特定條件下,我得出結(jié)論在當(dāng)前情況下,緩解Discuz!論壇的MySQL負(fù)載比較有效的方法就是使用Memcache!
使用Memcache的理由:
1.Web Server(Lighttpd、Nginx據(jù)說(shuō)都比Apache效率高好多,大家可以試用下)對(duì)CPU要求高,對(duì)內(nèi)存要求低;而Memcached Server是對(duì)CPU要求低,對(duì)內(nèi)存要求高,所以可以搭配使用。在對(duì)前端的Web Server上安裝Memcached Server是可行的。
2.金錢(qián)金錢(qián)金錢(qián),最少的付出,獲得最大的收益。
3.簡(jiǎn)單簡(jiǎn)單簡(jiǎn)單,對(duì)于一個(gè)架構(gòu)合理的系統(tǒng)來(lái)說(shuō),添加Memcache的支持可能只是一個(gè)批量處理文件的過(guò)程
Discuz!使用Memcache
1.在config.inc.php中增加
$memcacheport = 11211;
$memcachelife = 60;
2.在include/common.inc.php中
$mem = new Memcache;$mem->connect($memcachehost, $memcacheport);
3.修改include/db_mysql.class.php中的fetch_array、query這兩個(gè)方法,并添加query_mysql方法,代碼如下:
function fetch_array($query, $result_type = MYSQL_ASSOC) {return is_resource($query) ? mysql_fetch_array($query, $result_type) : $query[0];
}
function query_memcache($sql, $type = '') {
global $mem,$memcachelife;
$key = md5($sql);
if(!($query = $mem->get($key))) {
$query = $this->query($sql, $type);
while($item = $this->fetch_array($query)) {
$res[] = $item;
}
$query = $res;
$mem->set($key, $query , 0, $memcachelife);
}
return $query;
}
function query($sql, $type = '') {
global $debug, $discuz_starttime, $sqldebug, $sqlspenttimes;
$func = $type == 'UNBUFFERED' && @function_exists('mysql_unbuffered_query') ?
'mysql_unbuffered_query' : 'mysql_query';
if(!($query = $func($sql, $this->link)) && $type != 'SILENT') {
$this->halt('MySQL Query Error', $sql);
}
if(substr($sql, 0, 6) == 'SELECT') {
echo '<font color="red">Cache SQL</font>:<font color="green">'.$sql.'</font><br /><br />';
} else {
echo '<font color="red">Flash SQL</font>:<font color="green">'.$sql.'</font><br /><br />';
}
$this->querynum++;
return $query;
}
4.將需要使用Memcache緩存的SQL查詢的代碼由
$db->query(修改為
$db->query_memcache(注意并將
while($post = $db->fetch_array($query)) {修改為
foreach($query as $post) {沒(méi)有while的$db->fetch_array可以不用修改。
下面代碼有用得著的就拿去:
preg_replace("/while/([$](/w+)/s*/=/s*[$]db->fetch_array/([$]query/)/)/is", "foreach(/$query as /$//1)", $file);回頭放出個(gè)小工具批量替換下就可以了。
在EditPlus中可以這樣替換:while/([$](.*) = [$]db->fetch_array/([$]query/)/)替換為foreach($query as $/1)
5.完成了,測(cè)試吧!~
php技術(shù):Discuz!下Memcache緩存實(shí)現(xiàn)方法,轉(zhuǎn)載需保留來(lái)源!
鄭重聲明:本文版權(quán)歸原作者所有,轉(zhuǎn)載文章僅為傳播更多信息之目的,如作者信息標(biāo)記有誤,請(qǐng)第一時(shí)間聯(lián)系我們修改或刪除,多謝。