PHP扩展Memcache分布式部署方案


Posted in PHP onDecember 06, 2015

基础环境

其实基于PHP扩展的Memcache客户端实际上早已经实现,而且非常稳定。先解释一些名词,Memcache是danga.com的一个开源项目,可以类比于MySQL这样的服务,而PHP扩展的Memcache实际上是连接Memcache的方式。

首先,进行Memcache被安装具体可查看博客里的其它几篇文章;
其次,进行PHP扩展的安装,官方地址是http://pecl.php.net/package/memcache
最后,启动Memcache服务,比如这样,通过不同端口启动多个进程模拟分布式:

/usr/local/bin/memcached -d -p 11211 -u root -m 10 -c 1024 -t 8 -P /tmp/memcached.pid

/usr/local/bin/memcached -d -p 11213 -u root -m 10 -c 1024 -t 8 -P /tmp/memcached.pid

/usr/local/bin/memcached -d -p 11214 -u root -m 10 -c 1024 -t 8 -P /tmp/memcached.pid

启动三个只使用10M内存以方便测试。

参数说明:

-d选项是启动一个守护进程,
-m 是分配给Memcache使用的内存数量,单位是MB,我这里是512MB,
-u是运行Memcache的用户,我这里是root,
-l 是监听的服务器IP地址,如果有多个地址的话,我这里指定了服务器的IP地址192.168.0.1,
-p是设置Memcache监听的端口,我 这里设置了11211,最好是1024以上的端口,
-c选项是最大运行的并发连接数,默认是1024,我这里设置了512,按照你服务器的负载量 来设定,
-P是设置保存Memcache的pid文件,我这里是保存

分布式部署

PHP的PECL扩展中的memcache实际上在2.0.0的版本中就已经实现多服务器支持,现在都已经2.2.5了。请看如下代码

$memcache = new Memcache;
$memcache->addServer('localhost', 11211);
$memcache->addServer('localhost', 11213);
$memcache->addServer('localhost', 11214);
$memStats = $memcache->getExtendedStats();
print_r($memStats);

通过上例就已经实现Memcache的分布式部署,是不是非常简单。

分布式系统的良性运行

在Memcache的实际使用中,遇到的最严重的问题,就是在增减服务器的时候,会导致大范围的缓存丢失,从而可能会引导数据库的性能瓶颈。测试时可以通过关闭一个memcached进程,来测试数据是否存在,实例:

<?php
//第一次设置值后再作注释

$memcache = new Memcache;
$memcache->addServer('localhost', 11211);

//$memcache->set("mykey", "这个值在11213添加前添加的");

$memcache->addServer('localhost', 11213);

if (!$memcache) echo "Connection to memcached failed";
  /*
  $memcache->set("str_key", "String to store in memcached");
  $memcache->set("num_key", 123);

  $object = new StdClass;
  $object->attribute = 'test';
  $memcache->set("obj_key", $object);

  $array = Array('assoc'=>123, 345, 567);
  $memcache->set("arr_key", $array);
  */

  var_dump($memcache->get('mykey'));
  var_dump($memcache->get('str_key'));
  var_dump($memcache->get('num_key'));
  var_dump($memcache->get('obj_key'));

$memStats = $memcache->getExtendedStats();
var_dump($memStats);
?>

测试时关闭其中一台,可能会导致数据丢失:

string '这个值在11213添加前添加的' (length=35)
string 'String to store in memcached' (length=28)
boolean false
boolean false

为了避免出现这种情况,请先看Consistent hashing算法,中文的介绍可以参考memcached全面剖析--4. memcached的分布式算法,通过存取时选定服务器算法的改变,来实现。

memcached虽然称为“分布式”缓存服务器,但服务器端并没有“分布式”功能。

修改PHP的Memcache扩展memcache.c的源代码中的

"memcache.hash_strategy" = standard

"memcache.hash_strategy" = consistent
重新编译,这时候就是使用Consistent hashing算法来寻找服务器存取数据了。
有效测试数据表明,使用Consistent hashing可以极大的改善增删Memcache时缓存大范围丢失的情况。

NonConsistentHash: 92% of lookups changed after adding a target to the existing 10
NonConsistentHash: 90% of lookups changed after removing 1 of 10 targets
ConsistentHash: 6% of lookups changed after adding a target to the existing 10
ConsistentHash: 9% of lookups changed after removing 1 of 10 targets

安全配置

Memcache服务器端都是直接通过客户端连接后直接操作,没有任何的验证过程,这样如果服务器是直接暴露在互联网上的话是比较危险,轻则数据泄露被其他无关人员查看,重则服务器被入侵,因为Mecache是以root权限运行的,况且里面可能存在一些我们未知的bug或者是缓冲区溢出的情况,这些都是我们未知的,所以危险性是可以预见的。

内网访问

最好把两台服务器之间的访问是内网形态的,一般是Web服务器跟Memcache服务器之间。普遍的服务器都是有两块网卡,一块指向互联网,一块指向内网,那么就让Web服务器通过内网的网卡来访问Memcache服务器,我们Memcache的服务器上启动的时候就监听内网的IP地址和端口,内网间的访问能够有效阻止其他非法的访问。

# memcached -d -m 1024 -u root -l 192.168.0.200 -p 11211 -c 1024 -P /tmp/memcached.pid

Memcache服务器端设置监听通过内网的192.168.0.200的ip的11211端口,占用1024MB内存,并且允许最大1024个并发连接

设置防火墙

防火墙是简单有效的方式,如果却是两台服务器都是挂在网的,并且需要通过外网IP来访问Memcache的话,那么可以考虑使用防火墙或者代理程序来过滤非法访问。 一般我们在Linux下可以使用iptables或者FreeBSD下的ipfw来指定一些规则防止一些非法的访问,比如我们可以设置只允许我们的Web服务器来访问我们Memcache服务器,同时阻止其他的访问。

# iptables -F
# iptables -P INPUT DROP
# iptables -A INPUT -p tcp -s 192.168.0.2 --dport 11211 -j ACCEPT
# iptables -A INPUT -p udp -s 192.168.0.2 --dport 11211 -j ACCEPT

上面的iptables规则就是只允许192.168.0.2这台Web服务器对Memcache服务器的访问,能够有效的阻止一些非法访问,相应的也可以增加一些其他的规则来加强安全性,这个可以根据自己的需要来做。

PHP 相关文章推荐
php header示例代码(推荐)
Sep 08 PHP
解析posix与perl标准的正则表达式区别
Jun 17 PHP
php输入流php://input使用示例(php发送图片流到服务器)
Dec 25 PHP
ThinkPHP3.1新特性之查询条件预处理简介
Jun 19 PHP
PHP CodeIgniter框架的工作原理研究
Mar 30 PHP
浅析PHP关键词替换的类(避免重复替换,保留与还原原始链接)
Sep 22 PHP
详解PHP函数 strip_tags 处理字符串缺陷bug
Jun 11 PHP
thinkphp框架page类与bootstrap分页(美化)
Jun 25 PHP
Symfony查询方法实例小结
Jun 28 PHP
php之可变函数的实例详解
Sep 13 PHP
thinkPHP5框架自定义验证器实现方法分析
Jun 11 PHP
PHP创建文件及写入数据(覆盖写入,追加写入)的方法详解
Feb 15 PHP
PHP微信红包API接口
Dec 05 #PHP
php实现微信发红包
Dec 05 #PHP
详解php比较操作符的安全问题
Dec 03 #PHP
thinkPHP模型初始化实例分析
Dec 03 #PHP
ZF框架实现发送邮件的方法
Dec 03 #PHP
PHP实现的蚂蚁爬杆路径算法代码
Dec 03 #PHP
PHP实现QQ空间自动回复说说的方法
Dec 02 #PHP
You might like
php is_file()和is_dir()用于遍历目录时用法注意事项
2010/03/02 PHP
分割GBK中文遭遇乱码的解决方法
2013/08/09 PHP
CI框架中数据库操作函数$this-&gt;db-&gt;where()相关用法总结
2016/05/17 PHP
PHP实现负载均衡的加权轮询方法分析
2018/08/22 PHP
PHP 加密 Password Hashing API基础知识点
2020/03/02 PHP
Javascript 静态页面实现随机显示广告的办法
2010/11/17 Javascript
JavaScript判断前缀、后缀是否是空格的方法
2015/04/15 Javascript
谈谈Jquery中的children find 的区别有哪些
2015/10/19 Javascript
js+css实现回到顶部按钮(back to top)
2016/03/02 Javascript
如何用JavaScript实现动态修改CSS样式表
2016/05/20 Javascript
JavaScript_ECMA5数组新特性详解
2016/06/12 Javascript
js canvas实现擦除效果示例代码
2017/04/26 Javascript
Three.js如何用轨迹球插件(trackball)增加对模型的交互功能详解
2017/09/25 Javascript
基于jQuery实现定位导航位置效果
2017/11/15 jQuery
VUE2 前端实现 静态二级省市联动选择select的示例
2018/02/09 Javascript
基于Vue实现图片在指定区域内移动的思路详解
2018/11/11 Javascript
从0到1搭建Element的后台框架的方法步骤
2019/04/10 Javascript
JQuery事件委托原理与用法实例分析
2019/05/13 jQuery
使用vue中的混入mixin优化表单验证插件问题
2019/07/02 Javascript
JS 事件机制完整示例分析
2020/01/15 Javascript
微信小程序实现上传多张图片、删除图片
2020/07/29 Javascript
three.js显示中文字体与tween应用详析
2021/01/04 Javascript
跟老齐学Python之重回函数
2014/10/10 Python
Python的迭代器和生成器使用实例
2015/01/14 Python
Python3实现的Mysql数据库操作封装类
2018/06/06 Python
选择python进行数据分析的理由和优势
2019/06/25 Python
python如何解析配置文件并应用到项目中
2019/06/27 Python
Django基础知识 URL路由系统详解
2019/07/18 Python
Python2手动安装更新pip过程实例解析
2020/07/16 Python
Python爬虫之Selenium设置元素等待的方法
2020/12/04 Python
Marmot土拨鼠官网:美国专业户外运动品牌
2018/01/11 全球购物
国家励志奖学金个人先进事迹材料
2014/05/04 职场文书
新闻稿件写作技巧
2015/07/18 职场文书
Windows11插耳机没反应怎么办? win11耳机没声音的多种解决办法
2021/11/21 数码科技
css3中2D转换之有趣的transform形变效果
2022/02/24 HTML / CSS
MySQL 执行数据库更新update操作的时候数据库卡死了
2022/05/02 MySQL