Memcached在项目中的应用

 

Memcached在项目中的应用

应用服务器 网络应用 JVM Ubuntu memcached

Memcached是一个开源的快速分布式缓存框架，它和ehcached等缓存框架相比，具有下面的一些优势：
1、    跨jvm的缓存架。我们知道，在一个jvm进程中，一般情况下的有效内存利用最多为2G，如果你再把数据缓存在项目的jvm进程中，势必造成内存空间的紧缺，严重的时候会出现堆栈溢出面导致项目终止运行。
2、    集群环境下的缓存框架。Memcached启动后，有自己的独立IP地址及端口号（默认是11211，当然你可以更改），因此，在集群环境下或不同的几个项目间，都可以访问缓存服务器中的数据，非常的方便。
下面我们一起来看一看笔者在最近的一个项目中，是如何使用memached的。
一、安装memcached缓存服务器
如果你用的是windows服务器系统，请到http://jehiah.cz/projects/memcached-win32/下载，点其中的 exe可执行文件，Memcached就完成了启动，非常的简单。
如果你使用的是linux server，你需要如下的操作(以ubuntu为例)：
$ sudo apt-get install memcached（安装）
$ memcached -d -m 50 -p 11211 -u root（启动）
上面命令行参数说明：-m 指定使用多少兆的缓存空间；-p 指定要监听的端口； -u 指定以哪个用户来运行，默认情况下，会在本机的11211端口监听操作连接，你可以通过netstat –ant查看memcached是否已经正常运行。
你也可以通过修改/etc/default/memcached配置文件，将ENABLE_MEMCACHED=yes，让系统启动时，自动运行 memcached，省去了每次都要手式启动的繁琐步骤。
二、下载memcached的java访问客户端。下载地址：http://github.com/gwhalin/Memcached-Java- Client/downloads，将压缩包中的java_memcached-release_2.5.1.jar放到你的工程目录中。
如果你是用的PHP，Ruby等，也可在网上找到相应的访问Memcached模块及示例代码。
三、在java程序中的访问。
首先要强调一下，放入memcached中缓存的对象，必须以键值对（key/value）的方式放入，取的时候根据key来取，但memcached有几个自己的特殊要求：key必须为String，即字符串类型；而要缓存的对象必须要实现Serializable序列化接口。
在英语复读网(www.fudu365.com)的播放器中，当用户将鼠标停留到某个单词上时，系统要弹出该单词的解释及音标，由于项目组在开发时并没有找到一套合适的词库，我们的解决思路是：当有用户查询时，服务器向第三方翻译网站提交单词，再从返回的结果中解析出单词解释及发音。此查询过程相当费时，且在网络状态不好时表现不佳，但在当时这也许是最好的解决办法了。
Word对象是我们封装的单词音标及解释对象，该对象实现Serializable接口。当用户查询某个单词时，我们先会在Memcached缓存中查找，如果没有找到，则向数据库查询，如果数据库中也没有找到，再向第三方翻译网站提交，得到结果后返回给用户后，同时要把该单词存入数据库，同时放入 Memcached缓存，下次有用户查询同样的单词时，效率将会得到非常大的提升。系统得到一个单词翻译的代码如下：
public Word getWordTranslate(String aWord) {
        // 先从缓存中取
        Word word = getWordFromCache(aWord);
        if (word != null) {
            return word;
        }
       
        //从数据库中取
        word = wordDao.getWord(aWord);
        if (word != null) {
            //放入缓存
            MemcachedAdapter.add(aWord, word);;
            return word;
        }
       
        //从网上查词
        word = translateWordFromWebSite(aWord);
       
        if (! "e".equals(tv.getWords())) {
            //存入数据库
            saveWord(word);
            //放入缓存
            MemcachedAdapter.add(aWord, word);
        }
       
        return word;
    }

Memcached操作代码如下，其中的一些连接参数，你可以根据你的情况进行修改。
public class MemcachedAdapter {
   
protected static MemCachedClient mcc = new MemCachedClient();
   
    static {
        SockIOPool pool = SockIOPool.getInstance();
        pool.setServers(new String[]{"127.0.0.1:11211"});
       
        Integer[] weights = { 3 };
        pool.setWeights( weights );
        pool.setInitConn( 5 );
        pool.setMinConn( 5 );
        pool.setMaxConn( 250 );
        pool.setMaxIdle( 1000 * 60 * 60 * 6 );
       
        pool.setMaintSleep( 30 );
       
        pool.setNagle( false );
        pool.setSocketTO( 3000 );
        pool.setSocketConnectTO( 0 );
       
        pool.initialize();
    }
   
    public static Object get(String key) {
        return mcc.get(key);
    }
   
    public static boolean set(String key, Object o) {
        return mcc.set(key, o);
    }
   
    public static boolean add(String key, Object o) {
        return mcc.add(key, o);
    }
   
    public static boolean replace(String key, Object o) {
        return mcc.replace(key, o);
    }
   
    public static boolean delete(String key) {
        return mcc.delete(key);
    }
   
}

在voa英语复读网 上线前，我们对单词翻译部分进行了压力测试，在很多用第一次查询某个单词的时候，速度很慢，但系统运行一段时候后，由于常用单词都在Memcached中进行了缓存，速度上就基本就存在问题了。
最后还有一个问题要考虑，就是在操作系统重新启动后，Memcached中缓存的数据将不再存在，为了效率考虑，你可以在应用服务器启动时，将所有的单词对象全部读出，再添加到Memcahced中。
项目上线后性能表现还是非常不错的，你可通过www.fudu365.com查看到最终效果。