Nginx+PHP-FPM的优化技巧(2)

时间:2022-10-20 15:10:43


memcached的服务正式启动

建议用面向对象的方式来测试这个库:

Memcache::getVersion方法的作用是返回运行的Memcache的版本信息。 

Memcache::getStats 方法的作用是返回服务器的一些运行统计信息。Memcache::getStats方法有三个参数,第一个参数表示要求返回的类型:reset, malloc, maps, cachedump, slabs, items, sizes;第二个参数和第三个参数是在第一个参数设置“cachedump”时使用的。Memcache::getExtendedStats方法的作 用是获取进程池中所有进程的运行系统统计。

memcache_debug()函数的作用是控制调试功能,前提是php在编译的时候使用了–enable-debug选项,否则这个函数不会有作用。

Memcache::addServer 方法的作用是添加一个可供使用的服务器地址,Memcache::addServer方法有8个参数,除了第一个参数意外,其他都是可选的,第一个参数表 示服务器的地址,第二个参数表示端口,第三个参数表示是否是一个持久连接,第四个参数表示这台服务器在所有服务器中所占的权重,第五个参数表示连接的持续 时间,第六个参数表示连接重试的间隔时间,默认为15,设置为-1表示不进行重试,第七个参数用来控制服务器的在线状态,第8个参数允许设置一个回掉函数 来处理错误信息。

Memcache::setServerParams方法的作用是在运行时修改服务器的参数,Memcache::setServerParams 方法有六个参数,Memcache::addServer方法少了第三和第四个参数。 Memcache::getServerStatus方法的作用是获取运行服务器的参数,两个参数分别表示的地址和端口。

Memcache::flush方法的作用是清除所有缓存的数据,但是不会削去使用的内存空间。

Memcache::increment方法的作用是对保存的某个key中的值进行加法操作,Memcache::decremen方法的作用是对保存的某个key中的值进行减法操作。

PHP MEMCACHE高级缓存应用详解 文章录入:7747.Net    责任编辑:7747.Net  269 

【字体: 


01.<?php 
02.$memcache = new Memcache; 
03.$memcache->connect('localhost', 11211); 
04.$memcache->set('test_item', 8); 
05.$memcache->increment('test_item', 4); 
06.echo $memcache->decrement('test_item', 7); 
07.// 显示 5 
08.?> 

Memcache函数库是在 PECL(PHP Extension Community Library)中,主要作用是搭建大容量的内存数据的

临时存放区域,在分布式的时候作用体现的非常明显,否则不建议使用。 本人在ubuntu上安装

完运行的时候报错:
/usr/local/memcached/bin/memcached: error while loading shared libraries: libevent-1.4.so.2: 

cannot open shared object file: No such file or directory

按照:《libeven、memcached、libmemcache安装》中的方法,使用:

sudo ln -s /usr/local/lib/libevent-1.4.so.2 /usr/lib/libevent-1.4.so.2
可以修正这个BUG

通过新得立安装php的memcached模块,注销/etc/php5/conf.d/memcached.ini里面的“;”,重启apache

,调用phpinfo()出现memcached的信息

执行:

<?php 
$memcache = new Memcache
$memcache->connect('localhost'11211) or die ("Could not connect"); 
$version $memcache->getVersion(); 
echo "Server's version: ".$version.
\n"
?> 
<?php 
$memcache = new Memcache
$memcache->connect('localhost'11211) or die ("Could not connect"); 
print_r($memcache->getStats()); 
/** 
* Array 
* ( 
*     [pid] => 8052 
*     [uptime] => 9205 
*     [time] => 1205898428 
*     [version] => 1.2.5 
*     [pointer_size] => 32 
*     [rusage_user] => 0.008000 
*     [rusage_system] => 0.000000 
*     [curr_items] => 1 
*     [total_items] => 17 
*     [bytes] => 57 
*     [curr_connections] => 2 
*     [total_connections] => 15 
*     [connection_structures] => 3 
*     [cmd_get] => 9 
*     [cmd_set] => 23 
*     [get_hits] => 5 
*     [get_misses] => 4 
*     [evictions] => 0 
*     [bytes_read] => 671 
*     [bytes_written] => 850 
*     [limit_maxbytes] => 10485760 
*     [threads] => 1 
* ) 
*/ 
?> 
<?php 
$memcache = new Memcache
$memcache->connect('localhost'11211) or die ("Could not connect"); 
$memcache->set'name''leo'030); 
if(!$memcache->add'name''susan'030)) 

    echo 'susan is exist'
}; 
$memcache->replace'name''lion'0300); 
echo $memcache->get'name'); 
$memcache->delete'name'5); 
?>  
<?php 
function _callback_memcache_failure($host$port) { 
    print "memcache '$host:$port' failed"

$memcache = new Memcache
$memcache->addServer('192.168.1.116'11211); 
$memcache->setServerParams('192.168.1.116'11211115true,  

'_callback_memcache_failure'); 
echo $memcache->getServerStatus('192.168.1.116'11211); 
?> 
<?php 
$memcache = new Memcache
$memcache->connect('localhost'11211); 
$memcache->set('test_item'8); 
$memcache->increment('test_item'4); 
echo $memcache->decrement('test_item'7); 
// 显示 5 
?> 

 

/usr/local/bin/memcached -d -m 10 -u root -l 127.0.0.1 -p 11211 -c 256 -P 
                /tmp/memcached.pid
memcached的服务正式启动

Memcache::add — 添加一个值,如果已经存在,则返回false
Memcache::addServer — 添加一个可供使用的服务器地址
Memcache::close — 关闭一个Memcache对象
Memcache::connect — 创建一个Memcache对象
memcache_debug — 控制调试功能
Memcache::decrement — 对保存的某个key中的值进行减法操作
Memcache::delete — 删除一个key值
Memcache::flush — 清除所有缓存的数据
Memcache::get — 获取一个key值
Memcache::getExtendedStats — 获取进程池中所有进程的运行系统统计
Memcache::getServerStatus — 获取运行服务器的参数
Memcache::getStats — 返回服务器的一些运行统计信息
Memcache::getVersion — 返回运行的Memcache的版本信息
Memcache::increment — 对保存的某个key中的值进行加法操作
Memcache::pconnect — 创建一个Memcache的持久连接对象
Memcache::replace — R对一个已有的key进行覆写操作
Memcache::set — 添加一个值,如果已经存在,则覆写
Memcache::setCompressThreshold — 对大于某一大小的数据进行压缩Memcache::setServerParams — 在运行时修改服务器的参数 

建议用面向对象的方式来测试这个库:  

Memcache::getVersion方法的作用是返回运行的Memcache的版本信息。

Memcache::getStats 方法的作用是返回服务器的一些运行统计信息。Memcache::getStats方法有三个参

数,第一个参数表示要求返回的类型:reset, malloc, maps, cachedump, slabs, items, sizes;第二个

参数和第三个参数是在第一个参数设置为“cachedump”时使用的。Memcache::getExtendedStats方法的

作用是获取进程池中所有进程的运行系统统计。 

Memcache::connect方法的作用是创建一个Memcache对象。Memcache::pconnect方法的作用是创建一个

Memcache的持久连接对象。Memcache::close方法的作用是关闭一个Memcache对象。

Memcache::set 方法的作用是添加一个值,Memcache::set方法有四个参数,第一个参数是key,第二个参

数是value,第三个参数可选,表示是否压缩保存,第四个参数可选,用来设置一个过期自动销毁的时间

。Memcache::add方法的作用和Memcache::set方法类似,区别是如果 Memcache::add方法的返回值为

false,表示这个key已经存在,而Memcache::set方法则会直接覆写。 Memcache::get方法的作用是获取

一个key值,Memcache::get方法有一个参数,表示key。Memcache::replace 方法的作用是对一个已有的

key进行覆写操作,Memcache::replace方法有四个参数,作用和Memcache::set方法的相同。 

Memcache::delete方法的作用是删除一个key值,Memcache::delete方法有两个参数,第一个参数表示key

,第二个参数可选,表示删除延迟的时间。


memcache_debug()函数的作用是控制调试功能,前提是php在编译的时候使用了–enable-debug选项,否

则这个函数不会有作用。

Memcache::addServer 方法的作用是添加一个可供使用的服务器地址,Memcache::addServer方法有8个参

数,除了第一个参数意外,其他都是可选的,第一个参数表示服务器的地址,第二个参数表示端口,第三

个参数表示是否是一个持久连接,第四个参数表示这台服务器在所有服务器中所占的权重,第五个参数表

示连接的持续时间,第六个参数表示连接重试的间隔时间,默认为15,设置为-1表示不进行重试,第七个

参数用来控制服务器的在线状态,第8个参数允许设置一个回掉函数来处理错误信息。
Memcache::setServerParams方法的作用是在运行时修改服务器的参数,Memcache::setServerParams方法

有六个参数,Memcache::addServer方法少了第三和第四个参数。 Memcache::getServerStatus方法的作

用是获取运行服务器的参数,两个参数分别表示的地址和端口。

Memcache::flush方法的作用是清除所有缓存的数据,但是不会削去使用的内存空间。

Memcache::increment方法的作用是对保存的某个key中的值进行加法操作,Memcache::decremen方法的作

用是对保存的某个key中的值进行减法操作。 

Discuz!的Memcache缓存实现

前言: 
在PHP+MySQL架构的站点中,本文重点从MySQL的角度去分析如何使Discuz!论坛(或者类似的PHP+MySQL架构的程序)应对大访问 量。同时给出一些使用Memcache去减轻MySQL压力的建议。其中很多数据是个人测试的结果,如有不同意见,敬请留言告之。另外由于个人思维的问 题,行文比较跳跃,特此声明! 

系统分析: 
单纯的从MySQL的角度出发,单台MySQL的数据库负载到每天上亿次的操作(每秒大概1100次MySQL操作,然后乘以86400)应该不是非常困 难的事情。按照这个数据也就是说一个单MySQL服务器的论坛来说可以跑到2千万PV是不成问题的,我相信国内绝大部分的论坛都不可能做到每天2千万的 PV,但实际情况并不是如此。当论坛PV超过百万的时候一台WEB早已经不堪重负了。 
就我手头的一些数据显示,目前的Discuz!论坛的基本服务器架构是前面Squid顶着,后面才是一台DB在撑着。这种架构中,web服务器压力增大可 以通过并行增加服务器解决,而MySQL压力却无处释放,在不考虑MySQL官方服务的情况下,我们通过合理的利用Memcache是可以达到减轻 MySQL服务器负载的。 

可能会有朋友说我们可以对数据表进行分表(注:此处分表是指通过PHP程序去分表,比如pw,dv的分表)处理,但是当前的情况是一台DB服务器已经不能 支撑当前的数据处理了,通过PHP对MySQL进行的分表依然不能减轻MySQL的负载。(注:本段文字针对已经成型的系统,如果是独立开发的系统在架构 前期就进行数据的同步分区还是不错的。) 

还可能有朋友会说利用MySQL的主从构架,如果你提出这个问题,我就很明确的告诉你,回去看看手册吧。在Mysql Master/Slave 模式中,Slave主要是来备份数据的,只有当Master出现故障时,Slave才会接过Master的服务,对外部请求进行处理,直到Master恢 复正常。就是说:在Master/Slave中,要么是Master在服务,要么是Slave在服务,不会Master/Slave同时提供服务。使用 MySQL主从依然不能有效的降低MySQL的负载。 

或许你又会问我为什么不使用MySQL集群(MySQL Cluster),那可是白花花的银子啊,同等金钱的付出下,获得最大的收益才是王道。PS:说句题外话,MySQL手册中将MySQL集群解释为MySQL簇,不习惯。 

其实在MySQL5.1中的MySQL分区(MySQL Partition)是个很好的东西,它允许根据可以设置为任意大小的规则,跨文件系统分配单个表的多个部分。实际上,表的不同部分在不同的位置被存储为 单独的表。我认为这个才是当前情况下,最积极有效的降低MySQL负载的解决方法之一。但是遗憾的是,这种MySQL分区的方式我个人没有使用过的经历, 也不见有相当充分的案例表明它是稳定的或者不稳定的。所以我还在徘徊中。如果你知道,请麻烦告之!有朋友说腾讯是在用MySQL分区,但是遗憾的是我没有 得到确切的数据。 

好了分析总结了这么多种降低MySQL负载的方式之后,在用户环境需求等特定条件下,我得出结论在当前情况下,缓解Discuz!论坛的MySQL负载比较有效的方法就是使用Memcache! 


使用Memcache的理由: 
1.Web Server(Lighttpd、Nginx据说都比Apache效率高好多,大家可以试用下)对CPU要求高,对内存要求低;而Memcached Server是对CPU要求低,对内存要求高,所以可以搭配使用。在对前端的Web Server上安装Memcached Server是可行的。 
2.金钱金钱金钱,最少的付出,获得最大的收益。 
3.简单简单简单,对于一个架构合理的系统来说,添加Memcache的支持可能只是一个批量处理文件的过程 

Discuz!使用Memcache 
1.在config.inc.php中增加 

$memcachehost = '127.0.0.1'; 
$memcacheport = 11211; 
$memcachelife = 60; 
2.在include/common.inc.php中 

$mem = new Memcache; 
$mem->connect($memcachehost, $memcacheport); 
3.修改include/db_mysql.class.php中的fetch_array、query这两个方法,并添加query_mysql方法,代码如下: 

function fetch_array($query, $result_type = MYSQL_ASSOC) { 
return is_resource($query) ? mysql_fetch_array($query, $result_type) : $query[0]; 


function query_memcache($sql, $type = '') { 
global $mem,$memcachelife; 

$key = md5($sql); 
if(!($query = $mem->get($key))) { 
$query = $this->query($sql, $type); 
while($item = $this->fetch_array($query)) { 
$res[] = $item; 

$query = $res; 
$mem->set($key, $query , 0, $memcachelife); 

return $query; 


function query($sql, $type = '') { 
global $debug, $discuz_starttime, $sqldebug, $sqlspenttimes; 

$func = $type == 'UNBUFFERED' && @function_exists('mysql_unbuffered_query') ? 
'mysql_unbuffered_query' : 'mysql_query'; 
if(!($query = $func($sql, $this->link)) && $type != 'SILENT') { 
$this->halt('MySQL Query Error', $sql); 


if(substr($sql, 0, 6) == 'SELECT') { 
echo 'Cache SQL:'.$sql.'

'; 
} else { 
echo 'Flash SQL:'.$sql.'

'; 


$this->querynum++; 
return $query; 

4.将需要使用Memcache缓存的SQL查询的代码由 

$db->query( 
修改为 

$db->query_memcache( 
注意并将 

while($post = $db->fetch_array($query)) { 
修改为 

foreach($query as $post) { 
没有while的$db->fetch_array可以不用修改。 

下面代码有用得着的就拿去: 

preg_replace("/while\([$](\w+)\s*\=\s*[$]db->fetch_array\([$]query\)\)/is", "foreach(\$query as \$\\1)", $file); 
回头放出个小工具批量替换下就可以了。 
在EditPlus中可以这样替换:while\([$](.*) = [$]db->fetch_array\([$]query\)\)替换为foreach($query as $\1) 
5.完成了,测试吧!~ 

参考资料: 
对Memcached有疑问的朋友可以参考下列文章: 
Linux下的Memcache安装:http://www.ccvita.com/index.php/257.html 
Windows下的Memcache安装:http://www.ccvita.com/index.php/258.html 
Memcache基础教程:http://www.ccvita.com/index.php/259.html 
Discuz!的Memcache缓存实现:http://www.ccvita.com/index.php/261.html 

后记 
写完之后突然发现天已经要亮了,闷骚了一个晚上。个人的一些总结,欢迎留言探讨!