浅析Python的Django框架中的Memcached


Posted in Python onJuly 23, 2015

动态网站的问题就在于它是动态的。 也就是说每次用户访问一个页面,服务器要执行数据库查询,启动模板,执行业务逻辑以及最终生成一个你所看到的网页,这一切都是动态即时生成的。 从处理器资源的角度来看,这是比较昂贵的。

对于大多数网络应用来说,过载并不是大问题。 因为大多数网络应用并不是washingtonpost.com或Slashdot;它们通常是很小很简单,或者是中等规模的站点,只有很少的流量。 但是对于中等至大规模流量的站点来说,尽可能地解决过载问题是非常必要的。

这就需要用到缓存了。

缓存的目的是为了避免重复计算,特别是对一些比较耗时间、资源的计算。 下面的伪代码演示了如何对动态页面的结果进行缓存。

given a URL, try finding that page in the cache
if the page is in the cache:
  return the cached page
else:
  generate the page
  save the generated page in the cache (for next time)
  return the generated page

为此,Django提供了一个稳定的缓存系统让你缓存动态页面的结果,这样在接下来有相同的请求就可以直接使用缓存中的数据,避免不必要的重复计算。 另外Django还提供了不同粒度数据的缓存,例如: 你可以缓存整个页面,也可以缓存某个部分,甚至缓存整个网站。

Django也和”上游”缓存工作的很好,例如Squid(http://www.squid-cache.org)和基于浏览器的缓存。 这些类型的缓存你不直接控制,但是你可以提供关于你的站点哪部分应该被缓存和怎样缓存的线索(通过HTTP头部)给它们
设定缓存

缓存系统需要一些少量的设定工作。 也就是说,你必须告诉它缓存的数据应该放在哪里,在数据库中,在文件系统,或直接在内存中。 这是一个重要的决定,影响您的高速缓存的性能,是的,有些类型的缓存比其它类型快。

缓存设置在settings文件的 CACHE_BACKEND中。 这里是一个CACHE_BACKEND所有可用值的解释。
内存缓冲

Memcached是迄今为止可用于Django的最快,最有效的缓存类型,Memcached是完全基于内存的缓存框架,最初开发它是用以处理高负荷的LiveJournal.com随后由Danga Interactive公司开源。 它被用于一些站点,例如Facebook和维基百科网站,以减少数据库访问,并大幅提高站点的性能。

Memcached是免费的(http://danga.com/memcached)。它作为一个守护进程运行,并分配了特定数量的内存。 它只是提供了添加,检索和删除缓存中的任意数据的高速接口。 所有数据都直接存储在内存中,所以没有对使用的数据库或文件系统的开销。

在安装了Memcached本身之后,你将需要安装Memcached Python绑定,它没有直接和Django绑定。 这两个可用版本。 选择和安装以下模块之一:

    最快的可用选项是一个模块,称为cmemcache,在http://gijsbert.org/cmemcache。

    如果您无法安装cmemcache,您可以安装python - Memcached,在ftp://ftp.tummy.com/pub/python-memcached/。如果该网址已不再有效,只要到Memcached的网站http://www.danga.com/memcached/),并从客户端API完成Python绑定。

若要使用Memcached的Django,设置CACHE_BACKEND到memcached:/ / IP:port/,其中IP是Memcached的守护进程的IP地址,port是Memcached运行的端口。

在这个例子中,Memcached运行在本地主机 (127.0.0.1)上,端口为11211:

CACHE_BACKEND = 'memcached://127.0.0.1:11211/'

Memcached的一个极好的特性是它在多个服务器间分享缓存的能力。 这意味着您可以在多台机器上运行Memcached的守护进程,该程序会把这些机器当成一个单一缓存,而无需重复每台机器上的缓存值。 要充分利用此功能,请在CACHE_BACKEND里引入所有服务器的地址,用分号分隔。

这个例子中,缓存在运行在IP地址为172.19.26.240和172.19.26.242,端口号为11211的Memcached实例间分享:

CACHE_BACKEND = 'memcached://172.19.26.240:11211;172.19.26.242:11211/'

这个例子中,缓存在运行在172.19.26.240(端口11211),172.19.26.242(端口11212),172.19.26.244(端口11213)的Memcached实例间分享:

CACHE_BACKEND = 'memcached://172.19.26.240:11211;172.19.26.242:11212;172.19.26.244:11213/'

最后有关Memcached的一点是,基于内存的缓存有一个重大的缺点。 由于缓存的数据存储在内存中,所以如果您的服务器崩溃,数据将会消失。 显然,内存不是用来持久化数据的,因此不要把基于内存的缓存作为您唯一的存储数据缓存。 毫无疑问,在Django的缓存后端不应该用于持久化,它们本来就被设计成缓存的解决方案。但我们仍然指出此点,这里是因为基于内存的缓存是暂时的。

Python 相关文章推荐
Python实现的概率分布运算操作示例
Aug 14 Python
简单实现python聊天程序
Apr 01 Python
Python实现的字典排序操作示例【按键名key与键值value排序】
Dec 21 Python
Django框架模板文件使用及模板文件加载顺序分析
May 23 Python
Django 过滤器汇总及自定义过滤器使用详解
Jul 19 Python
Python笔记之facade模式
Nov 20 Python
python数据预处理 :样本分布不均的解决(过采样和欠采样)
Feb 29 Python
Python多个装饰器的调用顺序实例解析
May 22 Python
利于python脚本编写可视化nmap和masscan的方法
Dec 29 Python
selenium与xpath之获取指定位置的元素的实现
Jan 26 Python
Python 多线程之threading 模块的使用
Apr 14 Python
AI:如何训练机器学习的模型
Apr 16 Python
详解Django中的权限和组以及消息
Jul 23 #Python
在Django的模板中使用认证数据的方法
Jul 23 #Python
在Django中管理Users和Permissions以及Groups的方法
Jul 23 #Python
Django中对通过测试的用户进行限制访问的方法
Jul 23 #Python
在Django中限制已登录用户的访问的方法
Jul 23 #Python
详解Django框架中用户的登录和退出的实现
Jul 23 #Python
在Django的session中使用User对象的方法
Jul 23 #Python
You might like
php下把数组保存为文件格式的实例应用
2010/02/08 PHP
解析在PHP中使用mysqli扩展库对mysql的操作
2013/07/03 PHP
在Debian系统下配置LNMP的教程
2015/07/09 PHP
php使用curl_init()和curl_multi_init()多线程的速度比较详解
2018/08/15 PHP
PHP中检查isset()和!empty()函数的必要性
2019/02/13 PHP
Yii2.0框架behaviors方法使用实例分析
2019/09/30 PHP
jQuery contains过滤器实现精确匹配使用方法
2013/04/12 Javascript
JS实现div内部的文字或图片自动循环滚动代码
2013/04/19 Javascript
jquery中toggle函数交替使用问题
2015/06/22 Javascript
关于 jQuery Easyui异步加载tree的问题解析
2016/12/06 Javascript
详解Jquery Easyui的验证扩展
2017/01/09 Javascript
bootstrap table分页模板和获取表中的ID方法
2017/01/10 Javascript
angular学习之ngRoute路由机制
2017/04/12 Javascript
Vue v-model组件封装(类似弹窗组件)
2020/01/08 Javascript
Python 字典(Dictionary)操作详解
2014/03/11 Python
详尽讲述用Python的Django框架测试驱动开发的教程
2015/04/22 Python
Python面向对象程序设计OOP深入分析【构造函数,组合类,工具类等】
2019/01/05 Python
selenium 安装与chromedriver安装的方法步骤
2019/06/12 Python
python词云库wordCloud使用方法详解(解决中文乱码)
2020/02/17 Python
Python多线程Threading、子线程与守护线程实例详解
2020/03/24 Python
Python Tornado批量上传图片并显示功能
2020/03/26 Python
基于python生成英文版词云图代码实例
2020/05/16 Python
HTML5 embed 标签使用方法介绍
2013/08/13 HTML / CSS
有关HTML5中背景音乐的自动播放功能
2017/10/16 HTML / CSS
canvas线条的属性详解
2018/03/27 HTML / CSS
国贸专业个人求职信范文
2014/01/08 职场文书
法人授权委托书格式
2014/04/08 职场文书
学生安全责任书模板
2014/07/25 职场文书
革命英雄事迹演讲稿
2014/09/13 职场文书
师德自我剖析材料范文
2014/10/06 职场文书
英文感谢信格式
2015/01/21 职场文书
超市督导岗位职责
2015/04/10 职场文书
感恩教育主题班会
2015/08/12 职场文书
sql字段解析器的实现示例
2021/06/23 SQL Server
python神经网络学习 使用Keras进行回归运算
2022/05/04 Python
Go web入门Go pongo2模板引擎
2022/05/20 Golang