分布式缓存--memcached

       近日,在一篇技术博客中看到有关memcached是否过时的讨论,基本意思就是redis的出现,正在逐步弱化memcached的应用,顿时惊觉,我还没用过memcached技术,它就要过时啦?于是下面就是一通狂查资料,身为一只健忘的鱼,还是整理记录下所查资料,以备后查。大笑

 1、memcached是什么?具有哪些特征?

        memcached 是一个高性能的分布式内存对象缓存系统,用于动态Web应用以减轻数据库负载。它通过在内存中缓存数据和对象来减少读取数据库的次数,从而提高动态、数据库驱动网站的速度。memcached基于一个存储键/值对的hashmap。其守护进程(daemon )是用C写的,但是客户端可以用任何语言来编写,并通过memcached协议与守护进程通信。如图:

                                             

       作为高速运行的分布式缓存服务器,memcached 具有如下几个特点:

  • 协议简单,memcached的服务器客户端通信并不使用复杂的MXL等格式,而是使用简单的基于文本的协议。
  •  基于libevent的事件处理,libevent是个程序库,他将Linux 的epoll、BSD类操作系统的kqueue等时间处理功能封装成统一的接口。memcached使用这个libevent库,因此能在Linux、BSD、Solaris等操作系统上发挥其高性能。
  •  内置内存存储方式,为了提高性能,memcached中保存的数据都存储在memcached内置的内存存储空间中。由于数据仅存在于内存中,因此重启memcached,重启操作系统会导致全部数据消失。另外,内容容量达到指定的值之后memcached回自动删除不适用的缓存。
  •  memcached不互相通信的分布式,memcached尽管是“分布式”缓存服务器,但服务器端并没有分布式功能。各个memcached不会互相通信以共享信息。他的分布式主要是通过客户端实现的。

2、为什么用memcached,怎么不直接放到内存?

这是由memcached的优点决定的,直接放到内存,一是不能进行分布式扩展,二是缺乏一个有效的信息过期机制。

3、memcached适用场合和不适用场合?

适用场合

  • 分布式应用。由于memcached本身基于分布式的系统,所以尤其适合大型的分布式系统。
  • 数据库前段缓存。数据库常常是网站系统的瓶颈。数据库的大并发量访问,常常造成网站内存溢出。当然我们也可以使用Hibernate的缓存机制。但memcached是基于分布式的,并可独立于网站应用本身,所以更适合大型网站进行应用的拆分。
  • 服务器间数据共享。举例来讲,我们将网站的登录系统、查询系统拆分为两个应用,放在不同的服务器上,并进行集群,那这个时候用户登录后,登录信息如何从登录系统服务器同步到查询系统服务器呢?这时候,我们便可以使用memcached,登录系统将登录信息缓存起来,查询系统便可以获得登录信息,就像获取本地信息一样。

不适用场合

那些不需要“分布”的,不需要共享的,或者干脆规模小到只有一台服务器的应用,memcached不会带来任何好处,相反还会拖慢系统效率,因为网络连接同样需要资源

4、应用(参考)

安装

这里介绍windows环境的安装

  • 下载memcache的windows稳定版,解压放某个盘下面,比如在c:\memcached
  • 在cmd下输入 c:\memcached\memcached.exe -d install 安装
  • 再输入: c:\memcached\memcached.exe -d start 启动。

以后memcached将作为windows的一个服务每次开机时自动启动。这样服务器端已经安装完毕了。

客户端

Memcached本身是使用C开发的,客户端可以是php、C#、java。这里介绍基于java的客户端。

我在网上看到基于java的客户端有两个:

1.     javamemcached-release2.6.3

  •        简介

这是比较通用的Memcached客户端框架。具体原创不详。

  •        依赖的jar

        commons-pool-1.5.6.jar

        javamemcached-release2.6.3.jar

        slf4j-api-1.6.1.jar

        slf4j-simple-1.6.1.jar

2.     alisoft-xplatform-asf-cache-2.5.1

  •      简介

这个东东是阿里软件的架构师岑文初进行封装的。里面的注释都是中文的,比较好。

  • 依赖的jar

     alisoft-xplatform-asf-cache-2.5.1.jar

    commons-logging-1.0.4.jar

    hessian-3.0.1.jar

    log4j-1.2.9.jar

    stax-api-1.0.1.jar

    wstx-asl-2.0.2.jar

范例

基于javamemcached-release2.6.3

packagecom.hl.memcached.cache;

importjava.util.Date;

importcom.danga.MemCached.MemCachedClient;

importcom.danga.MemCached.SockIOPool;

 

public classMyCache {

    public static void main(String[] args) {

        MemCachedClient client=newMemCachedClient();

        String [] addr={"127.0.0.1:11211"};

        Integer [] weights = {3};

        SockIOPool pool =SockIOPool.getInstance();

        pool.setServers(addr);

        pool.setWeights(weights);

        pool.setInitConn(5);

        pool.setMinConn(5);

        pool.setMaxConn(200);

        pool.setMaxIdle(1000*30*30);

        pool.setMaintSleep(30);

        pool.setNagle(false);

        pool.setSocketTO(30);

        pool.setSocketConnectTO(0);

        pool.initialize();

 

//      String [] s  =pool.getServers();

        client.setCompressEnable(true);

        client.setCompressThreshold(1000*1024);

 

//      将数据放入缓存

       client.set("test2","test2");

 

//      将数据放入缓存,并设置失效时间

        Date date=new Date(2000000);

       client.set("test1","test1", date);

 

//      删除缓存数据

//      client.delete("test1");

 

//      获取缓存数据

        String str=(String)client.get("test1");

        System.out.println(str);

    }

}

基于alisoft-xplatform-asf-cache-2.5.1

配置memcached.xml

<?xmlversion="1.0" encoding="UTF-8"?>

<memcached>

    <!-- name 属性是程序中使用Cache的唯一标识;socketpool 属性将会关联到后面的socketpool配置; -->

    <client name="mclient_0"compressEnable="true" defaultEncoding="UTF-8"

        socketpool="pool_0">

        <!-- 可选,用来处理出错情况-->

       <errorHandler>com.alisoft.xplatform.asf.cache.memcached.MemcachedErrorHandler

        </errorHandler>

    </client>

 

    <!--

        name 属性和client 配置中的socketpool 属性相关联。

        maintSleep属性是后台线程管理SocketIO池的检查间隔时间,如果设置为0,则表明不需要后台线程维护SocketIO线程池,默认需要管理。

        socketTO 属性是Socket操作超时配置,单位ms aliveCheck

        属性表示在使用Socket以前是否先检查Socket状态。

    -->

    <socketpool name="pool_0"maintSleep="5000" socketTO="3000"

        failover="true"aliveCheck="true" initConn="5" minConn="5"maxConn="250"

        nagle="false">

        <!-- 设置memcache服务端实例地址.多个地址用","隔开 -->

       <servers>127.0.0.1:11211</servers>

       <!--

            可选配置。表明了上面设置的服务器实例的Load权重. 例如 <weights>3,7</weights> 表示30% load

            10.2.224.36:33001, 70% load 10.2.224.46:33001

 

        <weights>3,7</weights>

        -->

    </socketpool>

</memcached>

测试类

packagecom.hl.memcached.client.test;

 

importjava.util.ArrayList;

importjava.util.List;

 

importcom.alisoft.xplatform.asf.cache.ICacheManager;

importcom.alisoft.xplatform.asf.cache.IMemcachedCache;

importcom.alisoft.xplatform.asf.cache.memcached.CacheUtil;

importcom.alisoft.xplatform.asf.cache.memcached.MemcachedCacheManager;

importcom.hl.memcached.cache.client.TestBean;

 

public classClientTest {

 

    @SuppressWarnings("unchecked")

    public static void main(String[] args) {

        ICacheManager<IMemcachedCache>manager;

        manager =CacheUtil.getCacheManager(IMemcachedCache.class,

               MemcachedCacheManager.class.getName());

       manager.setConfigFile("memcached.xml");

        manager.start();

        try {

            IMemcachedCache cache =manager.getCache("mclient_0");

            cache.put("key","value");

           System.out.println(cache.get("key"));

        } finally {

            manager.stop();

        }

    }

 

}

使用memcached缓存java bean自定义对象

Memcached可以缓存String,也可以缓存自定义java bean。但必须是可序列化的java beanimplements Serializable即可)

基于javamemcached-release2.6.3

测试用java bean

packagecom.hl.memcached.cache.client;

 

importjava.io.Serializable;

 

public classTestBean implements Serializable{

    private static final long serialVersionUID= 5344571864700659321L;

 

    private String name;

    private Integer age;

    //getset方法略

}

MyCache.java 代码

packagecom.hl.memcached.cache;

 

importjava.util.Date;

 

importcom.danga.MemCached.MemCachedClient;

importcom.danga.MemCached.SockIOPool;

 

public classMyCache {

    public static void main(String[] args) {

        MemCachedClient client=newMemCachedClient();

        String [] addr={"127.0.0.1:11211"};

        Integer [] weights = {3};

        SockIOPool pool =SockIOPool.getInstance();

        pool.setServers(addr);

        pool.setWeights(weights);

        pool.setInitConn(5);

        pool.setMinConn(5);

        pool.setMaxConn(200);

        pool.setMaxIdle(1000*30*30);

        pool.setMaintSleep(30);

        pool.setNagle(false);

        pool.setSocketTO(30);

        pool.setSocketConnectTO(0);

        pool.initialize();

 

//      String [] s  =pool.getServers();

        client.setCompressEnable(true);

        client.setCompressThreshold(1000*1024);

 

//      将数据放入缓存

        TestBean bean=new TestBean();

        bean.setName("name1");

        bean.setAge(25);

        client.add("bean1", bean);

 

//      获取缓存数据

        TestBeanbeanClient=(TestBean)client.get("bean1");

        System.out.println(beanClient.getName());

    }

}

基于alisoft-xplatform-asf-cache-2.5.1

packagecom.hl.memcached.client.test;

 

importjava.util.ArrayList;

importjava.util.List;

 

importcom.alisoft.xplatform.asf.cache.ICacheManager;

importcom.alisoft.xplatform.asf.cache.IMemcachedCache;

importcom.alisoft.xplatform.asf.cache.memcached.CacheUtil;

importcom.alisoft.xplatform.asf.cache.memcached.MemcachedCacheManager;

importcom.hl.memcached.cache.client.TestBean;

 

public classClientTest {

 

    @SuppressWarnings("unchecked")

    public static void main(String[] args) {

        ICacheManager<IMemcachedCache>manager;

        manager =CacheUtil.getCacheManager(IMemcachedCache.class,

               MemcachedCacheManager.class.getName());

       manager.setConfigFile("memcached.xml");

        manager.start();

        try {

            IMemcachedCache cache =manager.getCache("mclient_0");

 

            TestBean bean=new TestBean();

            bean.setName("name1");

            bean.setAge(25);

            cache.put("bean", bean);

            TestBeanbeanClient=(TestBean)cache.get("bean");

           System.out.println(beanClient.getName());

 

            List<TestBean> list=newArrayList<TestBean>();

            list.add(bean);

            cache.put("beanList",list);

            List<TestBean>listClient=(List<TestBean>)cache.get("beanList");

            if(listClient.size()>0){

                TestBeanbean4List=listClient.get(0);

                System.out.println(bean4List.getName());

            }

        } finally {

            manager.stop();

        }

    }

 

}

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值