自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

大数据星球-浪尖

主要分享Spark使用及源码,spark 机器学习,图计算,同时会涉及到,如:hadoop,Hbase,Hive,Kafka。保证文章质量,给大家提供一个好的知识分享平台。

  • 博客(21)
  • 收藏
  • 关注

转载 面试|详解CAS及其引发的三个问题

本文主要简介一下CAS原理及其引发的三个问题:1.ABA问题; 2.自旋锁开销及jdk8解决方案; 3.单对象操作及解决。1. CAS简介在多线程编程的时候,为了保证多个...

2019-06-29 19:42:25 402

转载 如何写出无法维护的代码

“对,你没看错,本文就是教你怎么写无法维护的代码。”来源 |秃头哥编程程序命名容易输入的变量名。比如:Fred,asdf单字母的变量名。比如:a,b,c,x,y,z(如...

2019-06-28 21:54:52 387

转载 spark jobserver源码导读

最近有人问浪尖,想读一个比较大的spark项目源码,问浪尖要,浪尖只能告诉你业务相关的是基本上不会有人开源,平台相关的源码就比较多了,浪尖比较推荐的是Spark JobS...

2019-06-25 20:36:07 503

转载 终于有人把 Elasticsearch 原理讲透了!

搜索是现代软件必备的一项基础功能,而 Elasticsearch 就是一款功能强大的开源分布式搜索与数据分析引擎。它可以从海量数据中快速找到相关信息,在同领域内几乎没有...

2019-06-24 17:11:44 1144

转载 线上问题排查,我常用的“三板斧”。

作者:红魔七号 来源:http://t.cn/RJ9xS6p平时的工作中经常碰到很多疑难问题的处理,在解决问题的同时,有一些工具起到了相当大的作用,在此书写下来,一是作...

2019-06-22 21:28:37 857

转载 美团面试题:JVM堆内存溢出后,其他线程是否可继续工作?

作者:大佛拈花 来源:http://t.cn/Ai9VH6oE最近网上出现一个美团面试题:“一个线程OOM后,其他线程还能运行吗?”。我看网上出现了很多不靠谱的答案。...

2019-06-21 20:22:00 438

原创 重要|Spark driver端得到executor返回值的方法

有人说spark的代码不优雅,这个浪尖就忍不了了。实际上,说spark代码不优雅的主要是对scala不熟悉,spark代码我觉得还是很赞的,最值得阅读的大数据框架之一。今...

2019-06-20 20:14:54 2352 3

原创 Spark Core读取ES的分区问题分析

ES也是比较火热,在日志数据分析,规则分析等确实很方便,说实话用es stack 浪尖觉得可以解决很多公司的数据分析需求。极客时间下周一要上线新的ES课程,有需要的暂时别...

2019-06-19 22:55:46 1590 1

转载 PB级数据实时查询,滴滴Elasticsearch多集群架构实践

“Elasticsearch 是基于 Lucene 实现的分布式搜索引擎,提供了海量数据实时检索和分析能力。Elastic公司开源的一系列产品组成的 Elastic S...

2019-06-18 20:05:39 597

原创 Java并发锁(一):悲观锁与乐观锁

本文是粉丝投稿,原文地址:https://blog.csdn.net/qq_33540203/article/details/92597837今天我们来聊下线程中的悲观锁...

2019-06-17 20:05:31 160

转载 阿里云Redis开发规范

摘要: 本文介绍了在使用阿里云Redis的开发规范,从键值设计、命令使用、客户端使用、相关工具等方面进行说明,通过本文的介绍可以减少使用Redis过程带来的问题。一、键值...

2019-06-16 21:53:26 117

原创 重要|flink的时间及时区问题解决

1.时间纪元所谓的”时间纪元”就是1970年1月1日0时0分0秒,指的是开始的时间。比如Java类代码:Date date = new Date(0);System.ou...

2019-06-13 21:00:13 8584 2

转载 8种常见SQL错误用法

来源:https://yq.aliyun.com/articles/725011、LIMIT 语句分页查询是最常用的场景之一,但也通常也是最容易出问题的地方。比如对于下面...

2019-06-12 20:21:51 282

原创 从Spark加载资源管理器的源码提升自己~

作为Spark源码阅读爱好者,有谁想过Spark是如何实现资源管理器比如yarn等可插拔的呢?其实,在这里不得不说一下,spark1.6及之前,资源管理器还是不可插拔,代...

2019-06-11 20:20:32 338

原创 为啥spark 的broadcast要用单例模式

很多用Spark Streaming 的朋友应该使用过broadcast,大多数情况下广播变量都是以单例模式声明的有没有粉丝想过为什么?浪尖在这里帮大家分析一下,有以下几...

2019-06-10 20:04:58 1198

转载 经过性能对比,我发现温少的FastJson真牛。

作者:飞污熊 来源:http://t.cn/EK6Wr5G# 概述JSON不管是在Web开发还是服务器开发中是相当常见的数据传输格式,一般情况我们对于JSON解析构造的...

2019-06-09 21:51:30 1707

转载 困扰程序员的30种软件开发问题,你是否时曾相识?

来自:程序师链接:https://www.techug.com/post/30-programmer-meet-problems.html开发应用程序是一项压力很大的工作...

2019-06-08 16:42:23 449

转载 JDK中几个错误的调用方式

来源:my.oschina.net/tommylemon/blog/29671871.Annotation引用非空enum数组返回空数组首次发现时的环境:JDK 1.8首...

2019-06-07 23:06:52 298

转载 知乎质量平台的设计和实现

转自:https://zhuanlan.zhihu.com/p/68059263背景质量保障团队持续推进知乎质量体系的建设,发起和参与了一系列的工作,包括但不限于:产研流...

2019-06-06 22:27:43 3408

原创 面试|Flink实现PageRank算法

PageRank估计是很多面试场合上镜率比较高的吧,面试Spark的时候会被问到,最近flink热,估计也会被问到吧,浪尖就在这里帮大家解决这个疑难杂症。算法常见的原题是...

2019-06-05 19:58:39 2425 1

转载 请收藏 | Linux运维常见故障及处理的 32 个锦囊妙计

转自民工哥的技术之路说起来日常的故障,其实,首先应该相到的就是:“备份”、“备份”、“备份”。毕竟再怎么牢固的系统或硬件都会有故障的时候,所以,备份放第一位。作为linu...

2019-06-02 00:06:40 1038

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除