Day100 Java项目 (SSM+Dubbo)商城(九) 缓存解决方案

最新推荐文章于 2020-02-23 11:05:23 发布
最新推荐文章于 2020-02-23 11:05:23 发布
阅读量306 收藏
点赞数
分类专栏： 实践项目
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_43570604/article/details/101028550
版权

1.SpringDataRedis

一.SpringDataRedis简介

  1. SpringDataRedis 属于Spring Data 家族一员，用于对redis的操作进行封装的框架
  2. Spring Data ----- Spring 的一个子项目。Spring 官方提供一套数据层综合解决方案，用于简化数据库访问，支持NoSQL和关系数据库存储。包括Spring Data JPA 、SpringData Redis 、SpringDataSolr 、SpringDataElasticsearch 、Spring DataMongodb 等框架。

二.SpringDataRedis快速入门

  1. 准备工作
    1. 构建Maven工程 SpringDataRedisDemo 引入Spring相关依赖、JUnit依赖、Jedis和SpringDataRedis依赖
    2. 在src/main/resources下创建properties文件夹，建立redis-config.properties

      maxIdle ：最大空闲数
      maxWaitMillis: 连接时的最大等待毫秒数
    3. 在src/main/resources下创建spring文件夹，创建applicationContext-redis.xml
  2. 值类型操作
  3. Set类型操作


  4. List类型操作
    1. 右压栈 后添加的对象排在后边

      运行结果：[刘备, 关羽, 张飞]
    2. 左压栈 后添加的对象排在前边

      运行结果：[张飞, 关羽, 刘备]
    3. 根据索引查询元素
    4. 移除指定个数的值
  5. Hash类型操作
    1. 存入值
    2. 提取所有的KEY

      运行结果：[a, b, c, d]
    3. 提取所有的值
    4. 根据KEY提取值
    5. 根据KEY移除值
  6. ZSet类型操作
            zset是set的升级版本，它在set的基础上增加了一格顺序属性，这一属性在添加元素的同时可以指定，每次指定后，zset会自动重新按照新的值调整顺序。可以理解为有两列的mysql表，一列存储value，一列存储分值。
    1. 存值 ，指定分值
    2. 查询，由低到高
    3. 查询，由高到低
    4. 增加分数
    5. 查询值和分数

      TypedTuple是值与分数的封装。
  7. 过期时间设置
    以值类型为例：存值时指定过期时间和时间单位

2.缓存穿透、缓存击穿、缓存雪崩

一.缓存穿透

  1.       缓存穿透是指缓存和数据库中都没有的数据，而用户不断发起请求，如发起为id为“-1”的数据或id为特别大不存在的数据。这时的用户很可能是攻击者，攻击会导致数据库压力过大。如下面这段代码就存在缓存穿透的问题。
  2. 解决方案：
    1. 接口层增加校验，如用户鉴权校验，id做基础校验，id<=0的直接拦截；
    2. 从缓存取不到的数据，在数据库中也没有取到，这时也可以将key-value对写为key-0。这样可以防止攻击用户反复用同一个id暴力攻击。代码举例：
    3. 使用缓存预热
              缓存预热就是将数据提前加入到缓存中，当数据发生变更，再将最新的数据更新到缓存。后边我们就用缓存预热的方式实现对分类导航、广告轮播图等数据的缓存。

二.缓存击穿

  1. 缓存击穿是指缓存中没有但数据库中有的数据。这时由于并发用户特别多，同时读缓存没读到数据，又同时去数据库去取数据，引起数据库压力瞬间增大，造成过大压力。
    以下代码可能会产生缓存击穿：
  2. 解决方案：
    1.设置热点数据永远不过期。
    2.缓存预热

三.缓存雪崩

  1. 缓存雪崩是指缓存数据大批量到过期时间，而查询数据量巨大，引起数据库压力过大甚至down机。和缓存击穿不同的是，缓存击穿指并发查同一条数据，缓存雪崩是不同数据都过期了，很多数据都查不到从而查数据库。
  2. 解决方案：
    1.缓存数据的过期时间设置随机，防止同一时间大量数据过期现象发生。
    2.设置热点数据永远不过期。
    3.使用缓存预热

3.商品分类导航缓存

一.需求分析

  1. 为了提升首页的加载速度，减轻数据库访问压力，我们将首页的商品分类导航数据加载在缓存中。

二.实现思路

  1. 为了避免缓存穿透、击穿等问题，我们采用缓存预热的方式实现对分类导航数据的缓存。
  2. 考虑到商品分类导航数据不经常变动，所以我们不设置过期时间。

三.通用模块整合spring data redis

  1. qingcheng_common_service引入依赖
  2. qingcheng_common_service新增配置文件 redis-config.properties

    maxWait：连接池中连接用完时,新的请求等待时间,毫秒
    maxIdle： 最大闲置个数
  3. qingcheng_common_service新增spring配置文件applicationContext-redis.xml
  4. qingcheng_common_service工程新增枚举

四.商品分类加载到缓存

  1. 服务接口CategoryService新增方法定义
  2. CategoryServiceImpl实现此方法
  3. qingcheng_service_goods工程新增类

    实现InitializingBean接口的类会在启动时自动调用。

五.查询商品分类缓存

  1. 修改CategoryServiceImpl的findCategoryTree方法 ，直接从缓存中提取数据。

六.更新商品分类缓存

  1. 修改CategoryServiceImpl的增删改方法，在增删改后重新加载缓存

4.广告轮播图缓存

一.需求分析

  1. 为了提升首页的加载速度，减轻数据库访问压力，我们将首页的广告轮播图数据加载在缓存中。

二.实现思路

  1. 使用“缓存预热”的方式实现
    广告数据不只是轮播图，我们可以使用hash来存储广告数据。

三.广告数据加载到缓存

  1. AdService新增方法定义
  2. AdServiceImpl方法实现

  3. qingcheng_service_business工程新增类

四.查询广告缓存

  1. 修改AdServiceImpl的findByPosition方法

五.更新广告缓存

  1. 修改AdServiceImpl的增删改方法

5.商品详细页价格缓存

一.需求分析

  1. 我们已经将商品的信息生成为静态页面，但是商品价格经常变动，如果每次价格变动后都对静态页重新生成会影响服务器性能。所以，对于商品价格，我们采用异步调用的方式来进行客户端渲染。

二.实现思路

  1. 商品服务启动后加载全部价格数据到缓存。使用hash存储，skuID作为小KEY
  2. 从缓存从查询商品价格，封装为controller，并设置可跨域调用
    1. 什么叫跨域？
      当协议、子域名、主域名、端口号中任意一个不相同时，都算作不同域。不同域之间相互请求资源，就算作“跨域”。

      JavaScript出于安全方面的考虑，不允许跨域调用其他页面的对象。那什么是跨域呢，简单地理解就是因为JavaScript同源策略的限制，a.com域名下的js无法操作b.com或是c.a.com域名下的对象。
    2. 如何解决跨域问题？我们使用CORS实现跨域。
      CORS是一个W3C标准，全称是"跨域资源共享"（Cross-origin resourcesharing）。它允许浏览器向跨源服务器，发出 XMLHttpRequest 请求，从而克服了AJAX只能同源使用的限制。使用非常简单，只需要在controller类上添加一个 @CrossOrigin注解即可
  3. 修改商品详细页模板，使用ajax读取价格，并进行客户端渲染。

三.价格数据加载到缓存

  1. SkuService接口新增方法定义
  2. SkuServiceImpl类新增方法
  3. 修改InitService类

四.查询价格缓存

  1. SkuService新增方法定义
  2. SkuServiceImpl实现findPrice方法
  3. qingcheng_web_portal工程新增类
  4. 前端代码（修改模板）：
    （1）将vue.js axios.js 放到我们html输出文件夹下的js文件夹中。
    （2）修改qingcheng_web_portal工程的模板 item.html

    th:inline 定义js脚本可以使用变量 js脚本的变量用 /*[[${ }]]*/ 渲染
    （3）修改qingcheng_web_portal工程的模板 item.html ，添加 <div id="app">...
    </div> ，并将价格修改为vue表达式

五.更新价格缓存

  1. SkuService接口新增方法定义
  2. SkuServiceImpl类新增方法
  3. SpuServiceImpl类引入SkuService
  4. 修改SpuServiceImpl类saveGoods方法，在SKU列表循环体中添加代码

六.删除价格缓存

  1. SkuService新增方法定义
  2. SkuServiceImpl新增方法实现
  3. 修改SpuServiceImpl的delete方法，新增代码逻辑
Day110 Java项目 (SSM+Dubbo)商城(十九) 秒杀(二)
ambition
09-28 315
第1章 多线程下单 一.实现思路分析 在审视秒杀中，操作一般都是比较复杂的，而且并发量特别高，比如，检查当前账号操作是否已经秒杀过该商品，检查该账号是否存在存在刷单行为，记录用户操作日志等。 下订单这里，我们一般采用多线程下单，但多线程中我们又需要保证用户抢单的公平性，也就是先抢先下单。我们可以这样实现，用户进入秒杀抢单，如果用户复合抢单资格，只需要记录用户抢单数据，存入队列，多线程从队...
day82_淘淘商城项目_15_项目总结 + 项目中的问题_匠心笔记
黑泽君
01-12 2087
淘淘商城项目_15_项目总结 + 项目中的问题
ssm shiro redis dubbo 小米商城后台管理系统(CMS) H+前端框架
12-29
使用技术： 1、后端 核心框架：Spring Framework 4.3.5 安全框架：Apache Shiro 1.3.2 视图框架：Spring MVC 4.3.5 任务调度：Spring + Quartz 2.2.3 持久层框架：MyBatis 3.4.2 + Mybatis-plus 2.0.1 数据库连接池：Alibaba Druid 1.0 缓存框架：Ehcache 2.6 + Redis 2.9.0 日志管理：SLF4J 1.7 + Log4j2 2.7 布局框架：SiteMesh 3.0.1 分布式应用程序协调服务：ZooKeeper 3.3.1 分布式服务框架：Dubbo 2.5.3 接口测试框架：Swagger2 2.6.1 工具类：Apache Commons、Jackson 2.2、fastjson 1.2.20 2、前端 JS框架：Jquery 表格插件：Bootstrap Table 表单验证插件：BootstrapValidator 日期选择插件：Datepicker for Bootstrap 弹层组件：Layer 数据图表：Echarts 表单美化插件：ICheck 树形视图插件：Ztree 后台管理系统模版：H+ 电子商城系统模版：小米官网 演示官网： www.yb7s.cn 账号：admin 密码：123456 欢迎进 Java技术交流学习群，只为进步、学习的一群可爱的猴子们！！ QQ群【Java技术交流学习群】：583769724 遇到问题就一起来交流吧！ -------------------------------搞Java的二师兄 110668032@qq.com(欢迎交流)
Day108 Java项目 (SSM+Dubbo)商城(十七) 微信支付解决方案
ambition
09-27 473
1. 微信支付快速入门 一.微信支付申请（了解） 第一步：注册公众号（类型须为：服务号） 请根据营业执照类型选择以下主体注册：个体工商户| 企业/公司| 政府| 媒体| 其他类型。 第二步：认证公众号 公众号认证后才可申请微信支付，认证费：300元/次。 第三步：提交资料申请微信支付 登录公众平台，点击左侧菜单【微信支付】，开始填写资料等待审核，审核时间为1-5个工作日内。 第...
Dubbo Demo实例
zgsxhdzxl的博客
03-09 197
SpringBoot-注解方式 provider 引入jar，接口的jar就不写出来了，自己引自己的接口jar &lt;dependency&gt; &lt;groupId&gt;com.101tec&lt;/groupId&gt; &lt;artifactId&gt;zkclient&lt;/artifactId&gt; ...
Day103 Java项目 (SSM+Dubbo)商城(十二) 搜索解决方案-3 分页与排序
ambition
09-23 296
1.搜索分页 一.需求分析 实现搜索分页功能，每页显示30条记录。实现商品列表下方分页栏。 二.分页语法与代码 分页语法 需求：每页显示30条记录，查询第3页内容。分页语法如下： 分页代码 需求：每页显示30条记录，查询第3页内容。分页代码如下： 三.分页查询逻辑 实现思路：前端向后端传递参数 pageNo （页码） 修改SkuSearchServiceImpl的search方...
Day92 Java项目 (SSM+Dubbo)商城(一)
ambition
09-06 407
需求分析与系统设计 一.需求分析 一个全品类B2C电商平台，包含网站前台和管理后台两大部分。网站前台包含主站频道（首页、搜索、购物车及支付）、用户中心、秒杀、优惠券等频道。管理后台包含商品、订单、库存、用户、运营、统计、财务、设置等功能。 二.系统设计 数据库分库设计 （1）商品库 qingcheng_goods （2）订单库 qingcheng_order （3）基础设置库 qi...
day68_淘淘商城项目_01_电商介绍 + 互联网术语 + SOA + 分布式 + 集群介绍 + 环境配置 + 框架搭建_匠心笔记
黑泽君
12-29 478
day68_淘淘商城项目_01_电商介绍 + 互联网术语 + SOA + 分布式 + 集群介绍 + 环境配置 + 框架搭建_匠心笔记
分布式（电商项目实例）
04-28
综上所述，这个电商项目实例不仅涵盖了基础的SSM框架使用，还涉及到分布式服务、缓存管理、消息队列以及单点登录等高级话题，对于提升开发者在分布式系统设计和实现上的能力具有很大的价值。学习并掌握这些知识，...
day01_品优购电商项目_01_走进电商 + 分布式框架-Dubbox + 品优购-框架搭建 + 逆向工程 + 品牌列表展示 + 常见错误_用心笔记
黑泽君
01-14 1036
day01_品优购电商项目_01_走进电商 + 分布式框架-Dubbox + 品优购-框架搭建 + 逆向工程 + 品牌列表展示 + 常见错误_用心笔记
基于Redis缓存商城分类以及商品信息Demo
10-15
基于Redis缓存商城分类以及商品信息，实现商城数据高速精确访问，源码，jar包
基于storm实时热点统计的分布式并行缓存预热
03-19
一、基于nginx+lua完成商品详情页访问流量实时上报kafka的开发 ==================================== 在nginx这一层，接收到访问请求的时候，就把请求的流量上报发送给kafka 这样的话，storm才能去消费kafka中的实时的访问日志，然后去进行缓存热数据的统计 用得技术方案非常简单，从lua脚本直接创建一个kafka producer，发送数据到kafka ``` wget https://github.com/doujiang24/lua-resty-kafka/archive/master.zip yum install -y unzip unzip lua-resty-kafka-master.zip cp -rf /usr/local/lua-resty-kafka-master/lib/resty /usr/hello/lualib nginx -s reload local cjson = require("cjson") local producer = require("resty.kafka.producer") local broker_list = { { host = "192.168.31.187", port = 9092 }, { host = "192.168.31.19", port = 9092 }, { host = "192.168.31.227", port = 9092 } } local log_json = {} log_json["headers"] = ngx.req.get_headers() log_json["uri_args"] = ngx.req.get_uri_args() log_json["body"] = ngx.req.read_body() log_json["http_version"] = ngx.req.http_version() log_json["method"] =ngx.req.get_method() log_json["raw_reader"] = ngx.req.raw_header() log_json["body_data"] = ngx.req.get_body_data() local message = cjson.encode(log_json); local productId = ngx.req.get_uri_args()["productId"] local async_producer = producer:new(broker_list, { producer_type = "async" }) local ok, err = async_producer:send("access-log", productId, message) if not ok then ngx.log(ngx.ERR, "kafka send err:", err) return end ``` 两台机器上都这样做，才能统一上报流量到kafka ``` bin/kafka-topics.sh --zookeeper 192.168.31.187:2181,192.168.31.19:2181,192.168.31.227:2181 --topic access-log --replication-factor 1 --partitions 1 --create bin/kafka-console-consumer.sh --zookeeper 192.168.31.187:2181,192.168.31.19:2181,192.168.31.227:2181 --topic access-log --from-beginning ``` （1）kafka在187上的节点死掉了，可能是虚拟机的问题，杀掉进程，重新启动一下 nohup bin/kafka-server-start.sh config/server.properties & （2）需要在nginx.conf中，http部分，加入resolver 8.8.8.8; （3）需要在kafka中加入advertised.host.name = 192.168.31.187，重启三个kafka进程 （4）需要启动eshop-cache缓存服务，因为nginx中的本地缓存可能不在了 二、基于storm+kafka完成商品访问次数实时统计拓扑的开发 ==============
Day95 Java项目 (SSM+Dubbo)商城(四) 商品管理后端逻辑
ambition
09-10 423
1.分布式ID生成解决方案 一.数据库分片 如何实现数据库分片？我们通常会使用mycat数据库中间件来解决。 MyCat是一个开源的分布式数据库系统，是一个实现了MySQL协议的服务器，前端用户可以把它看作是一个数据库代理，用MySQL客户端工具和命令行访问，而其后端可以用MySQL原生协议与多个MySQL服务器通信，也可以用JDBC协议与大多数主流数据库服务器通信，其核...
《商城项目04》--Redis缓存的应用
weixin_39039342的博客
11-10 1213
一, redis的下载安装配置 1, 下载 贴个链接供参考使用:  redis-3.0.0.tar.gz 链接：https://pan.baidu.com/s/1wOBvnCdCm5zjeHRfvadwKQ  提取码：949t  2, 安装 &lt;前提是有已安装Linux虚拟机可使用&gt; 2.1  安装gcc编译器       yum install gcc-c++ 2.2 ...
Dubbo学习(十一)：结果缓存
Java面试辅导-海龟老师
04-25 2662
为什么要用到结果缓存，主要是用于加速热门数据的访问速度，Dubbo提供声明式缓存，以减少用户加缓存的工作量   缓存的应用非常广泛，为了提高数据访问的速度。Dubbo也不例外，它提供了声明式缓存，以减少用户加缓存的工作量。 一、Dubbo中缓存策略 lru 基于最近最少使用原则删除多余缓存，保持最热的数据被缓存。threadlocal 当前线程缓存，比如一个页面渲染，用到很多
【商城秒杀项目】-- 流量削峰应该怎么做
weixin_42687829的博客
02-23 2165
如果你看过秒杀系统的流量监控图的话，你会发现它是一条直线，在秒杀开始那一秒是一条很直很直的线，这是因为秒杀请求在时间上高度集中于某一特定的时间点。这样一来，就会导致一个特别高的流量峰值，它对资源的消耗是瞬时的。 但是对秒杀这个场景来说，最终能够抢到商品的人数是固定的，也就是说100人和10000人发起请求的结果都是一样的，并发度越高，无效请求也越多。 但是从业务上来说，秒杀活动是希望更多的人来...
商城项目（ssm+dubbo+nginx+mysql统合项目）总结（1）
weixin_30838873的博客
04-09 234
我不会在这里贴代码和详细步骤什么的，我觉得就算我把它贴出来，你们照着步骤做还是会出很多问题，我推荐你们去看一下黑马的这个视频，我个人感觉很不错，一步一步走下来可以学到很多东西。另外，视频和相关文档的话，关注微信公众号“Java面试通关手册”回复“资源分享第一波”即可领取. 本节内容具体可参考黑马该项目第四天的教案，教案以及相关文档和资料都在分享的网盘里...
Dubbo声明式缓存
kevin
08-03 918
为了进一步提高消费者对用户的响应速度，减轻提供者的压力，Dubbo提供了基于结果的声明式缓存。该缓存是基于消费者端的，所以使用很简单，只需修改消费者配置文件，与提供者无关 一、创建消费者07-consumer-cache （1） 创建工程 直接复制02-consumer-zk工程，并命名为07-consumer-cache （2） 修改消费者配置文件 类级别 方法级别 （3）...
Day105 Java项目 (SSM+Dubbo)商城(十四) 单点登录解决方案 CAS
ambition
09-24 741
1.开源单点登录系统CAS 一.什么是单点登录 单点登录（Single Sign On），简称为 SSO，是目前比较流行的企业业务整合的解决方案之一。SSO的定义是在多个应用系统中，用户只需要登录一次就可以访问所有相互信任的应用系统。 我们目前的系统存在诸多子系统，而这些子系统是分别部署在不同的服务器中，那么使用传统方式的session是无法解决的，我们需要使用相关的单点登录技术来解决。...
商城项目分布式系统实战：SSM+Dubbo架构源码解析
资源摘要信息:"商城项目的主体 分布式系统 ssm+dubbo" 在当前的IT技术领域，构建一个商城项目不仅需要考虑用户体验、商品展示、交易处理等前台功能，还要兼顾系统性能、高并发处理、数据一致性和系统的可扩展性等...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值