memcached

首先必须完成必要的软件安装，memcached是php连接memcached服务器的php扩展 以前有个叫memcache也是php连接memcached服务器的扩展 php的memcache和memcached扩展都是作为客户端去连接memcached服务器 但memcached作为客户端比memcache性能更好功能更强大，而且memcache已经停止更新了，因此现在使用扩展的话就用 memcached 接下来安装必要组件：wget https://launchpad.net/libmemcached/1.0/1.0.18/+download/ libmemcached-1.0.18.tar.gz mkdir /usr/local/libmemcached tar xf libmemcached-1.0.18.tar.gz cd libmemcached-1.0.18 ./configure --prefix=/usr/local/libmemcached --with-memcached make && make install 如果报错：./libtool: line 1125: g++: command not found 解决方法：yum -y install gcc-c++ wget http://pecl.php.net/get/memcached-2.2.0

nginx+memcached nginx的memcached_module模块可以直接从memcached服务器中读取内容后输出，后续的请求不再经过应用程序处理，如php-fpm、django，大大的提升动态页面的速度。nginx只负责从memcached服务器中读取数据，要往memcached写入数据还得需要后台的应用程序来完成，主动的将要缓存的页面缓存到memcached中，可以通过404重定向到后端去处理的。 整个请求的用户通过上图可得做，nginx可以先从memcached缓存先获取数据，，但缓存没有命中的时候rewrite到去请求去获取资源并缓存到memcached。 memcached 在memcached内存分配之前，先说下linux内存管理管理中用到的两种避免内存碎片的机制。 Buddy system 伙伴系统避免内存外的碎片，linux内核分配内存的方式是按照页框（默认4k大小）进行的，由于页框大小是4k，而很多信息打开需要用到几个页框，外碎片就是指内核想找一个大页框来存储某些信息时都无法找到，而buddy system就是会自动将相邻的页框合并成连续的大空间的一种机制。 Slab allocator slab分配器避免内存内的碎片，linux内核分配内存的方式是按照页框(默认4k大小)进行的，由于页框大小是4k

一、前言 　　非关系型数据库（NoSQL = Not Only SQL）的产品非常多，常见的有Memcached、Redis、MongoDB等优秀开源项目，相关概念和资料网上也非常丰富，不再重复描述，本文主要引入Memcached和Redis与淘宝开源Tair分布式存储进行对比测试，由于各自适用场景不同，且每个产品的可配置参数繁多， 涉及缓存策略、分布算法、序列化方式、数据压缩技术、通信方式、并发、超时等诸多方面因素，都会对测试结果产生影响 ，单纯的性能对比存在非常多的局限性和不合理性，所以不能作为任何评估依据，仅供参考，加深对各自产品的理解。以下是一些基本认识： 　　1、尽管 Memcached 和 Redis 都标识为Distribute，但从Server端本身而言它们并不提供分布式的解决方案，需要Client端实现一定的分布算法将数据存储到各个节点，从而实现分布式存储，两者都提供了Replication功能（Master-Slave）保障可靠性。 　　2、Tair 则本身包含 Config Server 和 Data Server 采用一致性哈希算法分布数据存储，由ConfigSever来管理所有数据节点，理论上服务器端节点的维护对前端应用不会产生任何影响，同时数据能按指定复制到不同的DataServer保障可靠性，从Cluster角度来看属于一个整体Solution

1、memcache启动参数 memcached -h memcached 1.4.20 -p < num > TCP端口，默认为11211，可以不设置 -U < num > UDP端口，默认为11211，0为关闭 -s < file > UNIX socket-a < mask > access mask for UNIX socket, in octal ( default: 0700 ) -l < addr > 监听的 IP 地址，本机可以不设置此参数 -d 以守护程序（daemon）方式运行 -u 指定用户，如果当前为 root ，需要使用此参数指定用户 -m < num > 最大内存使用，单位MB。默认64MB -M 禁止LRU策略，内存耗尽时返回错误，而不是删除项 -c < num > 最大同时连接数，默认是1024 -v verbose ( print errors/warnings while in event loop ) -vv very verbose ( also print client commands/reponses ) -vvv extremely verbose ( also print internal state transitions ) -h 帮助信息 -i print memcached and libevent license -P

传统MySQL+ Memcached架构遇到的问题 　　实际MySQL是适合进行海量数据存储的，通过Memcached将热点数据加载到cache，加速访问，很多公司都曾经使用过这样的架构，但随着业务数据量的不断增加，和访问量的持续增长，我们遇到了很多问题： 　　 1.MySQL需要不断进行拆库拆表，Memcached也需不断跟着扩容，扩容和维护工作占据大量开发时间。 　　2.Memcached与MySQL数据库数据一致性问题。 　　3.Memcached数据命中率低或down机，大量访问直接穿透到DB，MySQL无法支撑。 　　4.跨机房cache同步问题。 　众多NoSQL百花齐放，如何选择 　　最近几年，业界不断涌现出很多各种各样的NoSQL产品，那么如何才能正确地使用好这些产品，最大化地发挥其长处，是我们需要深入研究和思考的问题，实际归根结底最重要的是了解这些产品的定位，并且了解到每款产品的tradeoffs，在实际应用中做到扬长避短，总体上这些NoSQL主要用于解决以下几种问题 　　 1.少量数据存储，高速读写访问。此类产品通过数据全部in-momery 的方式来保证高速访问，同时提供数据落地的功能，实际这正是Redis最主要的适用场景。 　　2.海量数据存储，分布式系统支持，数据一致性保证，方便的集群节点添加/删除。 　　3

memcache和redis是互联网分层架构中，最常用的KV缓存。不少同学在选型的时候会纠结，到底是选择memcache还是redis？ memcache提供的功能是redis提供的功能的子集，不用想太多，选redis准没错？ redis倾向： 复杂的数据结构：value是哈希，列表，集合，有序集合这类复杂的数据结构时，会选择redis，因为mc无法满足这些需求。用户订单列表，用户消息，帖子评论列表等。 持久化： mc无法满足持久化的需求，只得选择redis。但是千万不要把redis真的做数据库用 a. redis的定期快照不能保证数据不丢失 b.redis的AOF会降低效率，并且不能支持太大的数据量 c.不要期望redis做固化存储会比mysql做得好，不同的工具做各自擅长的事情 d.redis挂掉重启后能够快速恢复热数据，但是如果着期间有数据修改，可能导致数据不一致，因此，只读场景，或者允许一些不一致的业务场景，可以尝试开启redis的固化功能 自带高可用集群： redis自身支持集群，实现主从读写分离功能，官方也提供sentinal哨兵的集群管理工具，实现主从监控，故障转移，memcached实现集群需要二次开发了 但是很多时候需要考虑，真的需要高可用么？缓存很多时候是运行cache miss的，cache挂了可以读db的 存储的内容比较大 ： macache

. 通过yum安装 复制代码 代码如下: yum -y install memcached #安装完成后执行: memcached -h #出现memcached帮助信息说明安装成功 2. 加入启动服务 复制代码 代码如下: chkconfig --level 2345 memcached on 3. 配置Memcached 复制代码 代码如下: vim /etc/sysconfig/memcached #文件中内容如下，按需要修改: PORT="11211" #端口 USER="root" #用户名 MAXCONN="1024" #最大连接数 CACHESIZE="64" #内存大小 OPTIONS="" #附加参数 4. 安装libmemached 复制代码 代码如下: wget https://launchpad.net/libmemcached/1.0/1.0.16/+download/libmemcached-1.0.16.tar.gz tar -zxvf libmemcached-1.0.16.tar.gz cd libmemcached-1.0.16 ./configure -prefix=/usr/local/libmemcached -with-memcached make && make install 5. 安装php-devel 复制代码 代码如下: yum