一、为什么需要缓存?
拉高程序性能
二、关系型数据库与非关系型数据库
关系型数据库:数据与数据之间存在关系的数据库mysql/Oracle、sqlserver
非关系型数据库:数据与数据之间是不存在关系的,key-value
非关系型数据库分类:
1、基于文件存储的数据库:ehcache
2、基于内存存储的数据库:redis、memcache
3、基于文档存储的数据库:mongodb
三,什么样的数据需要缓存
1、很少被修改的数据
2、不是很重要的数据,允许出现偶尔并发的数据
3、不会被并发访问的数据
4、参考数据,指的是供应用参考的常量数据,它的实例数目有限,它的实例会被许多其他类的实例引用,实例极少或者从来不会被修改
什么样的数据不适合存放到第二级缓存中
1、经常被修改的数据
2、财务数据,绝对不允许出现并发
3、与其他应用共享的数据
四,数据字典
一个项目中所有的基础数据,大概就是项目中所有的下拉框,这些下拉框很少被修改,不过有可能会修改
解决的问题:如果有一百个下拉框,那么就要建一百个表,数据缓存省略了大量表的创建
表设计:
数据源表:数据源标识,数据源描述
数据项表:数据源标识,数据项键,数据值键
五、ehcache的使用
1、ehcache的存取数据
导入jar包依赖
pom.xml文件 ,环境依赖部分
<properties>
<project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
<maven.compiler.source>1.8</maven.compiler.source>
<maven.compiler.target>1.8</maven.compiler.target>
<junit.version>4.12</junit.version>
<servlet.version>4.0.0</servlet.version>
<hibernate.version>5.2.12.Final</hibernate.version>
<mysql.driver.version>8.0.19</mysql.driver.version>
<ehcache.version>2.10.0</ehcache.version>
<slf4j-api.version>1.7.7</slf4j-api.version>
<log4j-api.version>2.9.1</log4j-api.version>
</properties>
<dependencies>
<dependency>
<groupId>junit</groupId>
<artifactId>junit</artifactId>
<version>${junit.version}</version>
<scope>test</scope>
</dependency>
<dependency>
<groupId>javax.servlet</groupId>
<artifactId>javax.servlet-api</artifactId>
<version>${servlet.version}</version>
<scope>provided</scope>
</dependency>
<dependency>
<groupId>org.hibernate</groupId>
<artifactId>hibernate-core</artifactId>
<version>${hibernate.version}</version>
</dependency>
<dependency>
<groupId>mysql</groupId>
<artifactId>mysql-connector-java</artifactId>
<version>${mysql.driver.version}</version>
</dependency>
<dependency>
<groupId>net.sf.ehcache</groupId>
<artifactId>ehcache</artifactId>
<version>${ehcache.version}</version>
</dependency>
<dependency>
<groupId>org.hibernate</groupId>
<artifactId>hibernate-ehcache</artifactId>
<version>${hibernate.version}</version>
</dependency>
<!-- slf4j核心包 -->
<dependency>
<groupId>org.slf4j</groupId>
<artifactId>slf4j-api</artifactId>
<version>${slf4j-api.version}</version>
</dependency>
<dependency>
<groupId>org.slf4j</groupId>
<artifactId>jcl-over-slf4j</artifactId>
<version>${slf4j-api.version}</version>
<scope>runtime</scope>
</dependency>
<!--用于与slf4j保持桥接 -->
<dependency>
<groupId>org.apache.logging.log4j</groupId>
<artifactId>log4j-slf4j-impl</artifactId>
<version>${log4j-api.version}</version>
</dependency>
<!--核心log4j2jar包 -->
<dependency>
<groupId>org.apache.logging.log4j</groupId>
<artifactId>log4j-api</artifactId>
<version>${log4j-api.version}</version>
</dependency>
<dependency>
<groupId>org.apache.logging.log4j</groupId>
<artifactId>log4j-core</artifactId>
<version>${log4j-api.version}</version>
</dependency>
</dependencies>
①、利用map集合简易实现缓存原理
package com.csf.four.test;
import java.util.HashMap;
import java.util.Map;
/**
* 利用map集合简易实现缓存原理
* 案例一体会怎么使用缓存
* 1.优先从缓存中获取对应数据
* 2.如果获取到了,那么直接返回
* 3.没有获取到,那么直接查询数据库,将数据库的数据放入缓存,再反返回
* @author Administrator
*/
public class EhcacheDemo1 {
static Map<String, Object> cache = new HashMap<String, Object>();
static Object getValue(String key) {
//从缓存中取数据
Object value = cache.get(key);
if(value == null) {
//没有取到
System.out.println("hello zs");//从数据库中读取数据
//把数据库数据同步到缓存
cache.put(key, new String[] {"zs"});
//进行返回
return cache.get(key);
}
//取到
return value;
}
public static void main(String[] args) {
System.out.println(getValue("sname"));//数组
System.out.println(getValue("sname"));
//结果:hello zs 从数据库中读取数据
//zs 返回值
// zs 缓存中拿到的
}
}
缓存的工作原理在注释中。输出结果如下
第一次访问得到的结果(第二条输出),来自数据库,第二次访问,来自缓存。
②、利用缓存存储数据
槽的配置文件ehcache.xm
<?xml version="1.0" encoding="UTF-8"?>
<ehcache xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:noNamespaceSchemaLocation="http://ehcache.org/ehcache.xsd"
updateCheck="false">
<!--磁盘存储:将缓存中暂时不使用的对象,转移到硬盘,类似于Windows系统的虚拟内存-->
<!--path:指定在硬盘上存储对象的路径-->
<!--java.io.tmpdir 是默认的临时文件路径。 可以通过如下方式打印出具体的文件路径 System.out.println(System.getProperty("java.io.tmpdir"));-->
<diskStore path="E://xxx"/><!-- 硬盘存储路径 -->
<!--defaultCache:默认的管理策略-->
<!--eternal:设定缓存的elements是否永远不过期。如果为true,则缓存的数据始终有效,如果为false那么还要根据timeToIdleSeconds,timeToLiveSeconds判断-->
<!--maxElementsInMemory:在内存中缓存的element的最大数目-->
<!--overflowToDisk:如果内存中数据超过内存限制,是否要缓存到磁盘上-->
<!--diskPersistent:是否在磁盘上持久化。指重启jvm后,数据是否有效。默认为false-->
<!--timeToIdleSeconds:对象空闲时间(单位:秒),指对象在多长时间没有被访问就会失效。只对eternal为false的有效。默认值0,表示一直可以访问-->
<!--timeToLiveSeconds:对象存活时间(单位:秒),指对象从创建到失效所需要的时间。只对eternal为false的有效。默认值0,表示一直可以访问-->
<!--memoryStoreEvictionPolicy:缓存的3 种清空策略-->
<!--FIFO:first in first out (先进先出)-->
<!--LFU:Less Frequently Used (最少使用).意思是一直以来最少被使用的。缓存的元素有一个hit 属性,hit 值最小的将会被清出缓存-->
<!--LRU:Least Recently Used(最近最少使用). (ehcache 默认值).缓存的元素有一个时间戳,当缓存容量满了,而又需要腾出地方来缓存新的元素的时候,那么现有缓存元素中时间戳离当前时间最远的元素将被清出缓存-->
<defaultCache eternal="false" maxElementsInMemory="1000" overflowToDisk="false" diskPersistent="false"
timeToIdleSeconds="0" timeToLiveSeconds="600" memoryStoreEvictionPolicy="LRU"/>
<!--name: Cache的名称,必须是唯一的(ehcache会把这个cache放到HashMap里)-->
<!--name: Cache的名称,必须是唯一的(ehcache会把这个cache放到HashMap里)-->
<cache name="com.csf.one.entity.User" eternal="false" maxElementsInMemory="1"
overflowToDisk="true" diskPersistent="true" timeToIdleSeconds="0"
timeToLiveSeconds="300" memoryStoreEvictionPolicy="LRU"/>
</ehcache>
工具类:
package com.csf.four.util;
import net.sf.ehcache.Cache;
import net.sf.ehcache.CacheManager;
import net.sf.ehcache.Element;
import java.io.InputStream;
public class EhcacheUtil {
private static CacheManager cacheManager;
static {
try {
InputStream is = EhcacheUtil.class.getResourceAsStream("/ehcache.xml");
cacheManager = CacheManager.create(is);
} catch (Exception e) {
throw new RuntimeException(e);
}
}
private EhcacheUtil() {
}
//放数据
public static void put(String cacheName, Object key, Object value) {
Cache cache = cacheManager.getCache(cacheName);
if (null == cache) {
//以默认配置添加一个名叫cacheName的Cache
cacheManager.addCache(cacheName);
cache = cacheManager.getCache(cacheName);
}
cache.put(new Element(key, value));
}
//取数据
public static Object get(String cacheName, Object key) {
Cache cache = cacheManager.getCache(cacheName);
Element element = cache.get(key);
return null == element ? null : element.getValue();
}
public static void remove(String cacheName, Object key) {
Cache cache = cacheManager.getCache(cacheName);
cache.remove(key);
}
}
测试:
由于控制台打印了非常多的日志,所以不全部截出来
没报错就是运行成功
2、hibernate使用echcache作为二级缓存
①、一级缓存:
又称为session级别的缓存
package com.csf.four.test;
import org.hibernate.Session;
import org.hibernate.Transaction;
import org.junit.Test;
import com.csf.four.dao.UserDao;
import com.csf.one.entity.User;
import com.csf.two.util.SessionFactoryUtil;
/**
* 演示查单个用户使用了缓存
* @author Administrator
*
*/
public class EhcacheDemo3 {
/**
* 默认情况下,sql语句形成了三次,这里为了提高性能,必须使用二级缓存SessionFactory缓存
* <!-- 开启二级缓存 -->
* <property name="hibernate.cache.use_second_level_cache">true</property>
<!-- 开启查询缓存 -->
<property name="hibernate.cache.use_query_cache">true</property>
<!-- EhCache驱动 -->
注意:此处必须用hibernate的5.2.12.Final 版本
<property name="hibernate.cache.region.factory_class">org.hibernate.cache.ehcache.EhCacheRegionFactory</property>
映射文件中添加标签
<cache usage="read-write" region="com.csf.one.entity.User"/>
这里的region指的是Ehcache.xml中cacheName
* @param args
*/
@Test
public void test1() {
UserDao userDao = new UserDao();
User u = new User();
u.setId(7);
User user = userDao.get(u);
System.out.println(user);
User user2 = userDao.get(u);
System.out.println(user2);
User user3 = userDao.get(u);
System.out.println(user3);
}
/**
* 同一个session,sql语句只生成一次,这里用到了一级缓存
*/
@Test
public void test2() {
Session session = SessionFactoryUtil.getSession();
Transaction transaction = session.beginTransaction();
User user = session.get(User.class, 7);
System.out.println(user);
User user2 = session.get(User.class, 7);
System.out.println(user2);
User user3 = session.get(User.class, 7);
System.out.println(user3);
transaction.commit();
session.close();
}
}
运行test1,在控制台会打印三条查询语句,因为总共向数据库查询了三次。
运行test2,在控制台只打印一条查询语句,但数据也显示了三次。
原因在于在hibernate中,默认有一级缓存,也就是在session中的,而test1每次查询都生成了新的session,所以会产生三条语句,而test2,是使用同一个session,所以会在session缓存中读取到符合条件的数据,也就不再查询数据库了。这就是一级缓存。
因为在平常开发中,不同的查询往往对应不同的session,所以一级缓存作用范围小,所以就有了二级缓存。
②、二级缓存
sessionFactory级别的缓存
开启二级缓存:
(1)、在hibernate.cfg.xml文件中进行配置:
<!-- 开启二级缓存 -->
<property name="hibernate.cache.use_second_level_cache">true</property>
<!-- 开启查询缓存 -->
<property name="hibernate.cache.use_query_cache">true</property>
<!-- EhCache驱动 -->
<!-- 注意:此处必须用hibernate的5.2.12.Final 版本 -->
<property name="hibernate.cache.region.factory_class">org.hibernate.cache.ehcache.EhCacheRegionFactory</property>
(2)二级缓存并不是随便用的,内存是有限的(并不是每一个表使用的实体类都要使用二级缓存)
由于要使用User实体类,就要在它的映射文件(User.hbm,xml)中进行配置
<cache usage="read-write" region="com.csf.one.entity.User"/>
测试
/**
* 演示查单个用户使用了缓存
* @author Administrator
*
*/
public class EhcacheDemo3 {
/**
* 默认情况下,sql语句形成了三次,这里为了提高性能,必须使用二级缓存SessionFactory缓存
* <!-- 开启二级缓存 -->
* <property name="hibernate.cache.use_second_level_cache">true</property>
<!-- 开启查询缓存 -->
<property name="hibernate.cache.use_query_cache">true</property>
<!-- EhCache驱动 -->
注意:此处必须用hibernate的5.2.12.Final 版本
<property name="hibernate.cache.region.factory_class">org.hibernate.cache.ehcache.EhCacheRegionFactory</property>
映射文件中添加标签
<cache usage="read-write" region="com.zking.one.entity.User"/>
这里的region指的是Ehcache.xml中cacheName
* @param args
*/
@Test
public void test2() {
UserDao userDao = new UserDao();
User u = new User();
u.setId(7);
User user = userDao.get(u);
System.out.println(user);
User user2 = userDao.get(u);
System.out.println(user2);
User user3 = userDao.get(u);
System.out.println(user3);
}
}
控制台输出
3、hibernate多条记录缓存
①、hibernate二级缓存默认不会同时缓存多条数据
测试代码:
package com.csf.four.test;
import java.util.List;
import org.hibernate.Session;
import org.hibernate.Transaction;
import org.hibernate.query.Query;
import com.csf.two.util.SessionFactoryUtil;
/**
* hibernate二级缓存不会同时缓存多条数据
* @author Administrator
*
*/
public class EhcacheDemo4 {
public static void main(String[] args) {
Session session = SessionFactoryUtil.getSession();
Transaction transaction = session.beginTransaction();
Query query = session.createQuery("from User");
// query.setCacheable(true);
List list = query.list();
System.out.println(list);
List list2 = query.list();
System.out.println(list2);
List list3 = query.list();
System.out.println(list3);
transaction.commit();
session.close();
}
}
结果如果是按照二级缓存的规律,则只会生成一条sql语句,但是结果是有三条
②、缓存多条数据要通过手动代码去控制
query.setCacheable(true);
最后的结果就是只产生了一条sql语句,三遍数据都查出来了。