自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

原创 记一次spark streaming + spark sql应用的长时间运行异常关闭问题的排查过程

背景 最近公司的推荐系统准备上线一个实时预测的功能,通过实时训练模型后实时预测用户的实时兴趣,进而推荐相关作品。项目用到了spark streaming、spark sql和spark mllib。功能开发完成后,预生产环境测试性能很不理想,于是我便接到这个需求优化改造任务。 优化的过程无非是从以...

2020-05-29 18:51:36 181 0

原创 快乐之源

2020-04-08 23:27:54 34 0

原创 分布式作业调度框架——Elastic-Job

分布式作业调度框架——Elastic-Job 1.概述 Elastic-Job是当当开源的分布式弹性作业框架。Elastic-Job分为lite和cloud两个相对独立的版本,lite版为轻量级去中心化的版本,cloud版则是基于Mesos + Docker方案提供了资源治理、应用分发和服务隔离的...

2020-04-08 11:23:31 73 0

原创 Kibana的sentinl插件的安装使用

安装sentinl插件 到https://github.com/sirensolutions/sentinl/releases上选择合适的版本,比如你的kibana是5.6.2的,那么这里也要选择5.6.2的sentinl版本;复制zip包的链接地址,然后到kibana服务器(开通外网)上,执行下...

2019-03-13 11:24:17 2052 1

原创 Redis的Ziplist数据结构

Redis之ziplist数据结构

2018-09-02 11:51:07 93 0

原创 MySQL Innodb的MVCC实现原理

之前面试时有被问到mysql的mvcc,虽然对mvcc的原理大概了解,但是mysql中是怎么实现mvcc的确实没有认真去了解过。今天就完整的学习一下。

2018-06-29 22:56:45 1529 0

原创 面经分享

        既是第一篇博客,也不好去抄。就随意分享下近来换工作的面试经历,你们就当故事看吧。        1.玲盛科技。投完简历不久,人事就打电话过来了,问了些大致信息、英文能力等。然后就加qq传了份编程作业题给我,让我花两个小时左右完成下,两天后给她答案。题目是全英文的,一共5题。题目倒挺...

2018-06-29 18:27:46 316 0

原创 始记

以往总不爱做笔记,认为学完会忘的就是不属于你,你就不曾真的掌握过它。忘了就要再去学一遍。直到有一天突然发现,记笔记或许不只可以用来复习,还可以帮你梳理近来所学,加深理解。有些东西不试着复述一遍,就不一定是真懂。为什么有的东西看着都懂,而一旦要你解释,却又什么都说不清。因为你就根本没有真的看懂过它。...

2018-06-27 20:17:38 62 0

提示
确定要删除当前文章?
取消 删除