面经-项目

字节

工作内容

我们组主要业务是对用户产生的线索进行分发和对经纪人展位进行分发

工作中遇到最难的问题

服务在调用下游服务时触发调用超时报警,通过监控查到,我们服务设置的超时时间为300ms,下游服务设置的超时时间为1000ms,调用下游qps平均7k,pct99999为60ms左右,有极个别的请求延时大概在300-400ms之间触发的报警,联系下游部门排查后也没有更好的办法解决,只能我们对服务进行升级。

  • 考虑将我们的超时阈值调高到400ms,但查看了阈值修改历史,该接口已经多次上调阈值,并且接口上游在业务中会多次调用,继续上调阈值可能会触发其他上游服务的报警,治标不治本,不再考虑这种方法。
  • 通过监控看到我们服务调用下游的qps非常高,所以考虑降低调用下游的次数

触发超时的接口主要功能是获取经纪人的各种特征,其中大部分特征都需要先调用下游接口,流量放大导致qps非常高,阅读代码发现已经使用了缓存,缓存失效的时间是5分钟,因为该接口是批量获取经纪人特征的接口,考虑是缓存失效时间过短导致每次请求都会出现需要回源的情况。因为使用的是anycache的组件,缓存失效时间也是通过tcc进行配置的,所以直接尝试对线上服务进行修改,将缓存失效时间调为30分钟。但修改后qps并没有下降,再次阅读代码发现该接口在获取某个特征时,并没有使用anycache的缓存,导致每次请求都会用调用下游,接入anycache后重新上线,qps从原来的几千下降到了几百。报警也没有再触发了

数据库排查

服务超时报警治理时发现有服务在没有改动的情况下最近经常出现超时报警,通过查日志发现报错原因是mysql查询超时。分析sql语句后发现是没有加索引导致的。

解决办法

加索引

校园活动平台

简介

校园活动平台主要是为了帮助学校师生发布、获取信息、活动报名、组织、量化。项目是基于SpringBoot开发的,在项目中基于Mybatis插件实现了敏感数据脱敏、实现热搜榜单功能将热点数据实时保存在Redis缓存中,本次项目的数据库采用MySQL

难点/亮点

1、Token过期

问题描述

项目中使用JWT Token,由于Token设置了一定的过期时间,如果用户一直使用当超过Token过期时间时就会出现登录状态突然消失的情况。影响用户体验。如果Token设置时间过长又容易泄露不安全。

解决办法
客户端主动刷新

服务端提供刷新token的接口,客户端定时访问服务端刷新接口,如果token在有效期内并且将要过期则进行刷新。这种方式可能会出现接口泄露后被利用的情况

服务端双Token

服务端生成两个Token,两个Token有效期分别为30分钟和60分钟,服务端缓存60分钟的token。客户端在访问时当出现Token过期时从缓存中查询是否存在60分钟的Token,如果有则重新生成两个Token进行刷新,否则token进行失效处理。

2、Mybatis插件+注解实现数据脱敏

Mybatis插件是基于拦截器实现的,mybatis提供了四种拦截器,我主要使用了其中的参数拦截器和结果集拦截器。自定义敏感数据注解,并且在参数拦截器和结果集拦截器中对传入参数进行检查当存在自定义注解时对参数进行加解密。

加解密使用的是AES对称加密实现的

3、热搜榜单

问题描述

项目中需要实现热搜榜单这个功能,同时能够将热点数据存放到Redis中以达到提高服务响应速度。

解决办法
LRU或LFU算法

LRU:最近最少使用,将每次访问的信息置于队列头部

LFU:最不经常使用,为每个数据增加一个计数器,每次被访问时计数器加一

存在问题

LFU无法解决旧的高访问量数据导致排行榜实时性差的问题

衰减LFU算法

为了避免旧的数据对当前排行榜产生的影响,我们想到了在一定时间后对计数器的值进行衰减以减少旧数据的影响。这里采用了牛顿冷却定律,牛顿冷却定律只要定义了温度随时间的变化,我们可以将计数器的值看作温度值

公式替换为:当前热度值 = 上次热度值 * Exp((时间间隔)*冷却系数)

冷却系数 = loge ((当前浏览量)/(总浏览量))

Exp = e的a次方

时间间隔为小时则表示小时级别的排行榜

通过定时任务实现,每小时更新一次热度榜并实时将热度榜单前100的数据缓存到Redis中

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

shenyang1026

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值