介绍一个生产环境中memcached的使用场景,主要是memcached存储关系型数据库mysql的查询结果,比如网站的下载排名等,这种查询每次
介绍一个生产环境中memcached的使用场景,主要是memcached存储关系型数据库mysql的查询结果,比如网站的下载排名等,这种查询每次从关系型数据库中查询,会增加磁盘的i/o开销,而这个排名不需要实时的更新,所以我们把这个结果存在memcached中,memcached是把数据序列化存放在内存中,我们可以设置超时时间,然后周期性的从关系型数据库查询新的结果更新到memcached中。
我用python来写个小的demo演示这个场景。首先python连接memcached和mysql需要加载对应的模块。程序的作用就是:先从memcached查询薪水最高的两个人,打印他们的姓名和薪水,如果没有返回结果,说明memcached中不存在,那么我们从关系型数据库mysql中去查询结果,然后更新在memcached中,再次请求,就会从memcached直接返回结果。
安装python-memcached和mysql-python包
yum install -y python-memcached mysql-python
#!/usr/bin/python
import sys
import mysqldb
import memcache
memc = memcache.client(['127.0.0.1:11211'], debug=1);
key = memc.get(top2salary)
if key != none:
print load data from memcache : %s,%s % (key[0], key[1])
else:
print updating memcached data from mysql.
conn = mysqldb.connect (host = 127.0.0.1,
user = root,
passwd = 123456,
db = web_user)
cursor = conn.cursor()
cursor.execute('select * from emp order by salary desc limit 2')
rows = cursor.fetchall()
memc.set('top2salary',rows,10)
mysql的emp表查询结果:
mysql> select * from emp;
+--------------+--------+
| name | salary |
+--------------+--------+
| casillas | 10500 |
| fernández | 350 |
| varane | 21000 |
| pepe | 16000 |
| ramos | 35000 |
| nacho | 4400 |
| coentro | 12500 |
| marcelo | 22000 |
| carvajal | 10500 |
| arbeloa | 6200 |
| khedira | 19500 |
| casemiro | 5300 |
| xabi alonso | 10500 |
| modric | 35000 |
| illarramendi | 16000 |
| isco | 31000 |
| bale | 70500 |
| di maría | 26500 |
| ronaldo | 88000 |
| jesé | 13000 |
| benzema | 30000 |
| morata | 10500 |
+--------------+--------+
22 rows in set (0.00 sec)
查询当前薪水排名的两人,第一次执行memcached为空,立刻去myql中查询,缓存在memcached,再次查都是从memcached返回,我在代码里设置超时时间10秒,10秒后清除缓存再次从mysql查询,如果这个时间段内mysql有新的数据变化,如插入更高薪水的人,那么会返回当前最新的结果,一般mysql被缓存在memcached中都是变化不太频繁的结果。
[root@localhost ~]# ./memc.py
updating memcached data from mysql.
[root@localhost ~]# ./memc.py
load data from memcache : ('ronaldo', '88000'),('bale', '70500')
[root@localhost ~]# ./memc.py
load data from memcache : ('ronaldo', '88000'),('bale', '70500')
[root@localhost ~]# ./memc.py
load data from memcache : ('ronaldo', '88000'),('bale', '70500')
优点如果加载网页每次都查询mysql而且执行order by这样的sql语句对数据库的i/o负载增加,,同时会减慢打开页面的速度。
python 的详细介绍:请点这里
python 的下载地址:请点这里
推荐阅读:
《python开发技术详解》.( 周伟,宗杰).[高清pdf扫描版+随书视频+代码]
python脚本获取linux系统信息