码迷,mamicode.com
首页 > 系统相关 > 详细

memcached优化方法

时间:2017-05-15 10:08:07      阅读:364      评论:0      收藏:0      [点我收藏+]

标签:使用   带宽   最小值   line   添加   注意   数据结构   page   小数   

工作原理
    基本概念:slab,page。chunk。

    slab,是一个逻辑概念。

它是在启动memcached实例的时候预处理好的,每一个slab相应一个chunk size。也就是说不同slab有不同的chunk size。详细分配多少个slab由參数 -f (增长因子)和 -n (chunk最小尺寸)决定的。

    page。能够理解为内存页。

大小固定为1m。slab会在存储请求时向系统申请page,并将page按chunk size进行分割。

    chunk,是保存用户数据的最小单位。用户数据item(包含key,value)终于会保存到chunk内。chunk规格是固定的,假设用户数据放进来后还有剩余则这剩余部分不能做其它用途。

     工作流程:memcahed实例启动,依据 -f 和 -n 进行预分配slab。

以 -n 为最小值開始。以 -f 为比值生成等比数列,直到1m为止(每一个slab的chunk size都要按8的倍数进行补全。比方:假设按比值算是556的话。会再加4到560成为8的整倍数)。然后每一个slab分配一个page。当用户发来存储请求时(key,value)。memcached会计算key+value的大小。看看属于哪个slab。确定slab后看里面的是否有空暇chunk放key+value。假设不够就再向系统申请一个page(假设此时已经达到 -m 參数设置的内存使用上限,则看是否设置了 -M 。假设设置了 -M 则返回错误提示,否则按LRU算法删除数据)。申请后将该page按本slab的chunk size 进行分割。然后分配一个来存放用户数据。


    注意:
    1,chunk是在page里面划分的。而page固定为1m。所以chunk最大不能超过1m。

    2,chunk实际占用内存要加48B。由于chunk数据结构本身须要占用48B。

    3,假设用户数据大于1m,则memcached会将其分割,放到多个chunk内。
    4,已分配出去的page不能回收。

优化建议
1,-n 參数的设置,注意将此參数设置为1024能够整除的数(还要考虑48B的差值)。否则余下来的部分就浪费了。
2,不要存储超过1m的数据。由于要拆成多个chunk,计算和时间成本都成倍添加。
3,善用stats命令查看memcached状态。

4。消灭eviction(被删除的数据)。造成eviction是由于内存不够,有三个思路:一是在CPU有余力的情况下开启压缩(PHP扩展);二是添加内存;三是调整 -f 參数,降低内存浪费。
5,调整业务代码。提高命中率。
6。缓存小数据。

省带宽。省网络I/O时间。省内存。

7,依据业务特点,为数据尺寸区间小的业务分配专用的memcached实例。这样能够调小 -f 參数。使数据集中存在少数几个slab上。内存浪费较少。

memcached优化方法

标签:使用   带宽   最小值   line   添加   注意   数据结构   page   小数   

原文地址:http://www.cnblogs.com/cxchanpin/p/6854802.html

(0)
(0)
   
举报
评论 一句话评论(0
登录后才能评论!
© 2014 mamicode.com 版权所有  联系我们:gaon5@hotmail.com
迷上了代码!