自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

延宝小白马的博客

学习与分享

  • 博客(4)
  • 资源 (16)
  • 收藏
  • 关注

原创 azkaban 调度任务一直处于preparing状态

原因: azkaban注册的执行器节点数据出现混乱解决方法:1. 停止当前azkaban服务(azkaban-execute 和 azkaban web server)2. 清除azkaban的executes表数据(清除之前表中此时存在除正常节点和激活状态为1的外的其它数据)3. 开启azkaban-execute服务4. 将azkaban的executes表的active值更新为15. 开启azkaban web server服务done....

2021-08-15 23:56:54 2160

转载 大数据平台数据处理之Lambda架构和Kappa架构

首先我们来看一个典型的互联网大数据平台的架构,如下图所示:在这张架构图中,大数据平台里面向用户的在线业务处理组件用褐色标示出来,这部分是属于互联网在线应用的部分,其他蓝色的部分属于大数据相关组件,使用开源大数据产品或者自己开发相关大数据组件。你可以看到,大数据平台由上到下,可分为三个部分:数据采集、数据处理、数据输出与展示。数据采集将应用程序产生的数据和日志等同步到大数据系统中,由于数据源不同,这里的数据同步系统实际上是多个相关系统的组合。数据库同步通常用 Sqoop,日志同步可以选择

2021-08-15 23:42:50 2775

转载 图文解说Flink的应用场景和功能

一 Flink是什么Apache Flink 是一个框架和分布式处理引擎,用于在无边界和有边界数据流上进行有状态的计算。Flink 能在所有常见的集群环境中运行,并能以内存速度和任意规模进行计算。二 为什么要选择Flink流式处理的特点是无界和实时的,不需要针对整个数据集进行处理,而是对系统传输的每个数据执行操作,因此流数据处理能更真实的反应我们的生活和工作方式;通常用在实时处理方面。我们工作的目标是低延迟的、高吞吐的、高可用的实时应用。三 哪些行业需要处理流数据电商

2021-08-15 23:38:15 12126

转载 IaaS、PaaS、SaaS、DaaS都是什么?现在怎么样了?看完这篇文章你就明白了!

导读:本文将详细科普云计算的概念、云服务的发展现状,并逐一介绍各种云服务模式(IaaS、PaaS、SaaS、DaaS),建议收藏!01 云计算的概念云是一种服务,可以像使用水、电、煤那样按需使用、灵活付费,使用者只需关注服务本身。云计算的资源是动态扩展且虚拟化的,通过互联网提供,终端用户不需要了解云中基础设施的细节,不必具有专业的云技术知识,也无须直接进行控制,只要关注自身真正需要什么样的资源以及如何通过网络来获得相应的服务即可。按照服务划分,云计算可以分为IaaS、

2021-08-15 23:32:36 7291 1

flume-interceptor-1.0.0-jar-with-dependencies.jar

flume拦截器 保留binlog es、data、database、table、type字段 分区字段名称: eventDate 放入 /opt/cloudera/parcels/CDH/lib/flume-ng/lib目录重启flume即可

2022-01-03

json-serde-1.3.8-jar-with-dependencies.jar

hive json数据格式存储,支持数组和嵌套复杂数据结构解析

2022-01-03

json-array-1.0-SNAPSHOT.jar

hive udf 支持数组字符串转数组对象

2022-01-03

SpringCloud与Docker实战

全面分析SpringCloud核心功能和特性。掌握高效java构建利器,快速构建微服务。

2018-08-16

Spring Boot实战

全面分析SpringBoot核心功能和特性。掌握高效java构建利器,快速构建微服务。

2018-08-16

Head First java&设计模式

Head First java&设计模式依图文并茂的方式讲解java和设计模式。

2018-08-15

Kubernetes实战经典

全面分析Kubernetes核心功能和特性。掌握高效java构建利器,快速构建微服务。

2018-08-15

Dcoker技术入门与实战&Docker; 容器与容器云(第2版)

1 中国首部Docker著作,一线Docker先驱实战经验结晶,来自IBM和新浪等多位技术专家联袂推荐! 2 浙江大学SEL实验室著

2018-08-15

eclipse样式文件

这是一个eclipse的样式文件,提供比较舒服的样式感受,视觉感觉良好。 导入方式: eclipse界面右键-->import-->General-->Preferences-->选择文件,import all(或根据你的需要)-->finsh

2018-05-11

高级大数据工程师面试题库

里面涵盖多种大数据面试题。供进行大数据面试的同学和进行相关学习的同学参考。

2017-12-09

git64位安装包

git64位安装包

2017-03-12

java随机动态生成汉字验证码图片

java随机动态生成汉字验证码图片的实例代码

2017-03-12

HTML5+CSS3

高大上画面HTML5+CSS登录DEMO

2017-03-12

myAcl权限项目

各种权限分配

2017-03-12

myeclipse集成SVN插件

myeclipse集成SVN插件

2017-01-14

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除