- 博客(9)
- 收藏
- 关注
转载 Ehcache详细解读
转载自:http://raychase.iteye.com/blog/1545906Ehcache是现在最流行的纯Java开源缓存框架,配置简单、结构清晰、功能强大,最初知道它,是从Hibernate的缓存开始的。网上中文的EhCache材料以简单介绍和配置方法居多,如果你有这方面的问题,请自行google;对于API,官网上介绍已经非常清楚,请参见官网;但是很少见到特性说明和对实
2017-12-19 11:46:09 294
原创 谈谈shuffle流程 细节就不说了
本文抛开 hadoop shuffle 原理 与 spark shuffle 单纯从逻辑思考。便于对hadoop shuffle 以及 spark shuffle的原理理解。数据:100亿数据存在1000台分布式系统中,每个机器存储1千万数据,这1千万数据存放在1000个block中,每个block存1万数据想象一下目标:100亿数据,得到每个关键词的词频如果是你,你的处理流程
2017-12-08 12:39:59 417
原创 瞬间高并发的处理方案
设置二级缓存:elasticsearch作为二级缓存,每次请求就更新es计数在redis没有的时候,对redis加锁,然后去es里读计数比较多的数据,更新缓存之后解锁
2017-12-07 19:11:33 971
转载 Redis中删除过期Key的三种策略
转载自:http://blog.csdn.net/a_bang/article/details/52986935?locationNum=9&fps=1项目中有个接口要频繁调用查询数据库中的数据,为了降低数据库的压力,所以把一部分记录先缓存在redis中,对redis中的数据设置了期限。今天无意间发现一个问题,使用dbsize查询出来的数量,比实际缓存量要高一部分。用red
2017-12-07 19:09:23 22713
转载 缓存失效策略(FIFO 、LRU、LFU三种算法的区别)
当缓存需要被清理时(比如空间占用已经接近临界值了),需要使用某种淘汰算法来决定清理掉哪些数据。常用的淘汰算法有下面几种:FIFO:First In First Out,先进先出。判断被存储的时间,离目前最远的数据优先被淘汰。LRU:Least Recently Used,最近最少使用。判断最近被使用的时间,目前最远的数据优先被淘汰。LFU:Least Frequently Used,最
2017-12-07 18:56:14 535
转载 最小二乘法 与 均方误差的区别 哈哈哈 相信很多人都没注意到
最小均方误差和最小二乘有什么区别?https://www.zhihu.com/question/27200164/answer/62411596
2017-12-05 11:33:38 15232 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人