解析linux下安装memcacheq(mcq)全过程笔记

memcacheQ是一个单纯的分布式消息队列服务。 一，MEMCACHEQ的应用背景 Web应用中为什 么 会需要消息队列？主要原因是由于在高并发环境下，由于来不及同步处理，请求往往会发生堵塞，比如说，大量的insert，update之类的请求同时到达 mysql，直接导致无数的行锁表锁，甚至最后请求会堆积过多，从而触发too manyconnections错误。通过使用消息队列，我们可以异步处理请求，从而缓解系统的压力。在Web2.0的时代，高并发的情况越来越常见，从 而使消息队列有成为居家必备的趋势，相应的也涌现出了很多实现方案，像Twitter以前就使用RabbitMQ实现消息队列服务，现在又转而使用 Kestrel来实现消息队列服务，此外还有很多其他的选择，比如说：ActiveMQ，ZeroMQ等。 上述消息队列的软件中，大多为了实现AMQP，STOMP，XMPP之类的协议，变得极其重量级，但在很多Web应用中的实际情况是：我们只是想找到一个缓解高并发请求的解决方案，不需要杂七杂八的功能，一个轻量级的消息队列实现方式才是我们真正需要的。,二，MEMCACHEQ的特性 1 简单易用 2 处理速度快 3 多条队列 4 并发性能好 5 与memcache的协议兼容。这就意味着只要装了memcache的extension就可以了，不需要额外的插件。,三，安装 MEMCACHEQ依赖于libevent和BerkleyDB。 BerkleyDB用于持久化存储队列的数据。 这样在MEMCACHEQ崩溃或者服务器挂掉的时候， 不至于造成数据的丢失。这一点很重要，很重要。 它的安装依赖于BerkeleyDB 和 libevent，所以要先安装这BerkeleyDB和libevent： 其中libevent如果你安装过memcached就已经安装了，如果不确定，就检查一下吧,1. 先检查libevent, libevent-devel是否已经安装： rpm -qa|grep libevent 输出中必须包含libevent, libevent-deve, 如果缺失，使用以下命令安装： yum install libevent yum install libevent-devel 注意事项：libevent, libevent-devel优先使用yum安装源，光盘镜像中的rpm包安装，这样稳定性和兼容性可得到保证，网上流传的使用源码安装libevent 的方法会有问题，因为很可能系统已经安装libevent, 再使用源码安装， 必然导致冲突，造成意外问题，所以一定要使用上述命令检查系统是否已经安装相应的库,2. 安装BerkleyDB 1.tar zxvf bdb-5.3.3.tar.gz 2.cd db-5.3.3/ #需要进入特定操作系统编译环境，更常规软件的编译有些区别 3.cd build_unix/ 4. ../dist/configure --prefix=/usr/local/berkeleydb #如果没有指定特殊安装路径，编译完成，需要将Berkeley Db运行库的路径添加到系统配置里面 echo "/usr/local/BerkeleyDB.5.3/lib/" >> /etc/ld.so.conf #重载系统Ld运行库 ldconfig 5. make & make install 记得改/etc/ld.so.conf文件，添加/usr/local/BerkeleyDB.5.3/lib啊，不然后面的mcq会安装错误。 而BerkeleyDB就要去下载了 点击下载Berkeley DB 5.3.21.rar 下面安装memcacheq， 先下载一个memcacheq-0.2.0.rar 解压，进目录 ./configure –with-bdb=/usr/local/BerkeleyDB.5.1 –with-libevent=/usr/local/lib –enable-threads make make install 关键是红色字体那一步，一定输入正确，不然make不通过，无法安装,下面是启动 memcacheq -d -r -u root -p21201 -H /data/memcacheq -N -v -L 1024 -B 1024 > /data/mq_error.log 2>&1 这里不推荐使用root用户，有些帖子里说不可以，我这里测试是可以的，不过可能会不安全。 1 下面是启动时候的参数 使用memcacheq -h 的命令来查看命令行选项 2 这个是正确的启动memcacheq：memcacheq -d -uroot -r -p11212 -H /home/wwwroot/mcq -N -R -v -L 1024 -B 1024 > /home/wwwlogs/mq_error.log 2 > &1 3 这个不知道为什么就不行/usr/local/memcacheq/bin/memcacheq -d -l 127.0.0.1 -A 8192 -H /data/memcacheq -B 65535 -N -R -u root -p TCP监听端口(default: 22201) -U UDP监听端口(default: 0, off) -s unix socket路径(不支持网络) -a unix socket访问掩码(default 0700) -l 监听网卡 -d 守护进程 -r 最大化核心文件限制 -u 以用户身份运行(only when run as root) -c 最大并发连接数(default is 1024) -v 详细输出 (print errors/warnings while in event loop) -vv 更详细的输出 (also print client commands/reponses) -i 打印许可证信息 -P PID文件 -t 线程数(default 4) --------------------BerkeleyDB Options------------------------------- -m BerkeleyDB内存缓存大小, default is 64MB -A 底层页面大小, default is 4096, (512B ~ 64KB, power-of-two) -H