许多Web 应用程序都将数据保存到RDBMS中,应用服务器从中读取数据并在浏览器中显示。但随着数据量的增大,访问的集中,就会出现REBMS的负担加重,数据库响应恶化,网站显示延迟等重大影响。Memcached是高性能的分布式内存缓存服务器。一般的使用目的是通过缓存数据库查询结果,减少数据库的访问次数,以提高动态Web 应用的速度、提高扩展性。如图:
Memcached作为高速运行的分布式缓存服务器具有以下特点。
1. 协议简单
memcached的服务器客户端通信并不使用复杂的MXL等格式,而是使用简单的基于文本的协议。
2. 基于libevent的事件处理
libevent是个程序库,他将Linux 的epoll、BSD类操作系统的kqueue等时间处理功能封装成统一的接口。memcached使用这个libevent库,因此能在Linux、BSD、Solaris等操作系统上发挥其高性能。
3. 内置内存存储方式
为了提高性能,memcached中保存的数据都存储在memcached内置的内存存储空间中。由于数据仅存在于内存中,因此重启memcached,重启操作系统会导致全部数据消失。另外,内容容量达到指定的值之后memcached回自动删除不适用的缓存。
4. Memcached不互通信的分布式
memcached尽管是“分布式”缓存服务器,但服务器端并没有分布式功能。各个memcached不会互相通信以共享信息。他的分布式主要是通过客户端实现的。
5. Memcached的内存管理
最近的memcached默认情况下采用了名为Slab Allocatoion的机制分配,管理内存。在改机制出现以前,内存的分配是通过对所有记录简单地进行malloc和free来进行的。但是这中方式会导致内存碎片,加重操作系统内存管理器的负担。
Slab Allocator的基本原理是按照预先规定的大小,将分配的内存分割成特定长度的块,已完全解决内存碎片问题。Slab Allocation 的原理相当简单。将分配的内存分割成各种尺寸的块(chucnk),并把尺寸相同的块分成组(chucnk的集合)如图:
而且slab allocator 还有重复使用已分配内存的目的。也就是说,分配到的内存不会释放,而是重复利用。
Slab Allocation 的主要术语
Page :分配给Slab 的内存空间,默认是1MB。分配给Slab 之后根据slab 的大小切分成chunk.
Chunk : 用于缓存记录的内存空间。
Slab Class:特定大小的chunk 的组。
2. 环境
3. 安装(下载源码包全部放至/usr/local/src目录下,先cd切换到/usr/local/src目录下工作)
安装libevent(memcache网络库部分基于libevent库开发,解决了不同平台的差异性)
下载:wget https://github.com/libevent/libevent/releases/download/release-2.1.8-stable/libevent-2.1.8-stable.tar.gz
解压: tar xf libevent-2.1.8-stable.tar.gz
进入目录: cd libevent-2.1.8-stable
安装: ./configure --prefix=/usr/local/libevent-2.1.8 && make && make install
做软链接 ln -s /usr/local/libevent-2.1.8 /usr/local/libevent
安装memcached
下载: wget
解压: tar xf memcached-1.4.35.tar.gz
进入目录: cd memcached-1.4.35
编译安装:./configure --prefix=/usr/local/memcached-1.4.35 --with-libevent=/usr/local/libevent && make && make install
做软链接: ln -s /usr/local/memcached-1.4.35 /usr/local/memcached
创建系统用户, 并且不创建家目录
useradd -r -s /sbin/nologin -M memcached
编辑并添加memcached启动脚本(当前路径还在memcached-1.4.35源码包目录里)
进入脚本目录: cd scripts
复制脚本至init.d目录下: cp memcached.sysv /etc/init.d/memcached
创建memcached运行目录, 并改变其用户与用户组为memcached
mkdir /var/run/memcached
chown memcached.memcached /var/run/memcached
编辑脚本: (/etc/init.d/memcached)