Flink
文章平均质量分 93
Apache Flink是由Apache软件基金会开发的开源流处理框架,其核心是用Java和Scala编写的分布式流数据流引擎。
大数据梦想家
专注与研究大数据基础,理论,架构与原型实现。
个人原创公众号「 大数据梦想家 」,每日更新大数据干货,欢迎上车!
一天的生活就是一生的缩影。在最美的年华,做最好的自己!!!
展开
-
干货 | 13道精选Flink面试题
相信小伙伴们对于Flink一定不会感到陌生,作为连续三年蝉联第一,荣膺全球最活跃的 Apache 开源项目,Flink在中国的热度也一直是居高不下。近几年,在社区的推动下,Flink 技术栈在越来越多的公司开始得到应用,因此在大数据的求职招聘中,对于Flink的着重考察也变得越来越重要。本期文章,菌哥就带大家来总结一下,在面试过程中,Flink常被问到的知识点有哪些?如果本文对你有帮助,记得在看完之后,一键三连(原创 2021-01-26 14:07:38 · 5505 阅读 · 41 评论 -
FlinkSQL | 流处理中的特殊概念
一、前言 上一篇文章,为大家介绍了关于 FlinkSQL 的背景,常见使用以及一些小技巧。学完之后,对于FlinkSQL只能算是简单入了个门。不过不用担心,本篇文章,博主将为大家带来关于 FlinkSQL中流处理的特殊概念,喜欢的话,记得看完点个赞|ू・ω・` )二、流处理中的特殊概念 Table API和SQL,原创 2021-01-20 17:49:38 · 2227 阅读 · 52 评论 -
干货 | 五千字长文带你快速入门FlinkSQL
前言 最近几天因为工作比较忙,已经几天没有及时更新文章了,在这里先给小伙伴们说声抱歉…临近周末,再忙再累,我也要开始发力了。接下来的几天,菌哥将为大家带来关于FlinkSQL的教程,之后还会更新一些大数据实时数仓的内容,和一些热门的组件使用!希望小伙伴们能点个关注,第一时间关注技术干货!FlinkSQL出现的背景 F原创 2021-01-19 22:24:42 · 2003 阅读 · 1 评论 -
基于 flink 的电商用户行为数据分析【9】| 电商常见指标汇总 + 项目总结
本篇是flink 的「电商用户行为数据分析」的第 9 篇文章,也是该系列的最后一篇,为大家带来电商常见的指标汇总和对前8篇文章做一个的阶段性的总结,并融入一些我自己的思考,希望大家能够从中受益,感谢阅读!电商指标整理有关"人"的指标客服指标名词名词解释询单量下单前来询问客服的客户总数询单转换率(转化率= 成单数/来访量转化率)影响的因素有:宝贝描述(宝贝图片优化和描原创 2020-12-17 01:00:53 · 6657 阅读 · 40 评论 -
基于 flink 的电商用户行为数据分析【8】| 订单支付实时监控
本篇是flink 的「电商用户行为数据分析」的第 8 篇文章,为大家带来的是市场营销商业指标统计分析之订单支付实时监控的内容!通过本期内容,我们可以实现通过使用CEP和Process Function来实现订单支付实时监控的功能,还能学会通过connect和join来实现flink双流join的功能,可谓干货满满!...原创 2020-12-14 22:39:30 · 5107 阅读 · 30 评论 -
基于 flink 的电商用户行为数据分析【7】| 页面广告分析
本篇是flink 的「电商用户行为数据分析」的第 7 篇文章,为大家带来的是市场营销商业指标统计分析之页面广告分析的内容。通过本期内容,我们可以实现页面广告点击量统计和黑名单过滤的功能。页面广告分析 电商网站的市场营销商业指标中,除了自身的APP推广,还会考虑到页面上的广告投放(包括自己经营的产品和其它网站的广告原创 2020-12-12 15:21:32 · 1969 阅读 · 0 评论 -
基于 flink 的电商用户行为数据分析【6】| APP市场推广统计
前言 本篇是flink 的「电商用户行为数据分析」的第6篇文章,为大家带来的是市场营销商业指标统计分析之APP市场推广统计的内容,通过本期内容的学习,你同样能够学会处理一些特定场景领域下的问题。话不多说,我们直入正题!...原创 2020-12-12 01:01:22 · 1834 阅读 · 0 评论 -
基于 flink 的电商用户行为数据分析【5】| 基于埋点日志数据的网络流量统计
前言 在《基于flink的电商用户行为数据分析【3】| 实时流量统计》这篇文章中,博主为大家介绍了基于服务器 log 的热门页面浏览量统计。 最后通过运行结果的验证,我们发现,从 web 服务器 log 中得到的 url,往往更多的是请求某个资源地址(/*.js、/*.css),如果要针对页面进行统计往往还需要进行过滤。而在实际电商应用中,相比每个单独页面的访问量,我们可能更加关心整个电商网站的网络流量。这个指标原创 2020-12-08 00:19:56 · 3019 阅读 · 31 评论 -
基于flink的电商用户行为数据分析【4】| 恶意登录监控
基于flink的电商用户行为数据分析之【恶意登录监控】,另附超强 CEP 讲解,真的不点进来学习一下吗!!!原创 2020-11-28 19:38:39 · 5945 阅读 · 30 评论 -
基于flink的电商用户行为数据分析【3】| 实时流量统计
前言 在上一期内容中,菌哥已经为大家介绍了实时热门商品统计模块的功能开发的过程(????基于flink的电商用户行为数据分析【2】| 实时热门商品统计)。本期文章,我们要学习的是实时流量统计模块的开发过程。 模块创建和数据准备原创 2020-11-27 23:42:42 · 3084 阅读 · 0 评论 -
基于flink的电商用户行为数据分析【2】| 实时热门商品统计
前言 在上一期内容中,菌哥已经为大家介绍了电商用户行为数据分析的主要功能和模块介绍。本期内容,我们需要介绍的是实时热门商品统计模块的功能开发。...原创 2020-11-24 23:50:15 · 3843 阅读 · 3 评论 -
基于flink的电商用户行为数据分析【1】| 项目整体介绍
前言 愉悦的一周又要开始了,本周菌哥打算用几期文章为大家分享一个之前在B站自学的一个项目——基于flink的电商用户行为数据分析。本期我们先对项目整体功能和模块做一个介绍。 正式介绍项目整体之前,我们来探讨一下批处理和流处理技术。批处理 VS 流处理 &原创 2020-11-22 21:51:01 · 5960 阅读 · 68 评论 -
大数据面试杀招 | Flink,大数据时代的“王者”
写在前面: 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!个人小站:http://alices.ibilibili.xyz/ , 博客主页:https://alice.blog.csdn.net/尽管当前水平可能不及各位大佬,但我还是希望自己能够做得更好,因为一天的生活就是一生的缩影。.原创 2020-11-02 23:14:43 · 5916 阅读 · 35 评论 -
简单告诉你,为什么要学 Flink,Flink 优势在哪?
知道大数据的同学也应该知道 Flink 吧,最近在中国的热度比较高,在社区的推动下,Flink 技术栈在越来越多的公司开始得到应用。Flink 到底火不火? 据不完全统计,Flink 在中国公司的采用情况(部分) 其中,转载 2020-11-01 22:21:43 · 3385 阅读 · 0 评论 -
快速入门Flink (10) —— DataStream API 开发之【EventTime 与 Window】
在上一篇博客中,博主已经为大家介绍了DataStream API 开发之【Time 与 Window】,并着重介绍了常用的 Window API 。本篇博客,我们就趁热打铁,继续接下去讲, DataStream API 开发之【EventTime 与 Window】。 码字不易,先赞后看!!!文章目录2、Even原创 2020-10-31 20:36:07 · 1609 阅读 · 17 评论 -
快速入门Flink (9) —— DataStream API 开发之【Time 与 Window】
本文是快速入门Flink的第九篇博客,主要介绍的是关于DataStream API的开发,其中涉及到一些抽象性名词,理解起来会有点难度,希望大家认真阅读ヽ( ̄▽ ̄)ノ 码字不易,先赞后看!!!文章目录DataStream API 开发1、Time 与 Window1.1 Time1.2 Window1.2.1 Wi原创 2020-08-11 16:40:25 · 2710 阅读 · 43 评论 -
快速入门Flink (8) —— DataStream 的 Transformation常用操作
写在前面: 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!个人小站:http://alices.ibilibili.xyz/ , 博客主页:https://alice.blog.csdn.net/尽管当前水平可能不及各位大佬,但我还是希望自己能够做得更好,因为一天的生活就是一生的缩影。.原创 2020-08-10 16:45:47 · 3520 阅读 · 46 评论 -
快速入门Flink (7) —— 小白都喜欢看的Flink流处理之DataSources和DataSinks
不知不觉,这已经是快速入门Flink系列的第7篇博客了。早在第4篇博客中,博主就已经为大家介绍了在批处理中,数据输入Data Sources 与数据输出Data Sinks的各种分类(传送门:Flink批处理的DataSources和DataSinks)。但是大家是否还记得Flink的概念?Flink是 分布式、 高性能、 随时可用以及准确的为流处理应用程序打造的开源流处理框架。所以光介绍了批处理哪里行呢!本篇博原创 2020-08-10 11:23:19 · 3651 阅读 · 43 评论 -
快速入门Flink (6) —— Flink的广播变量、累加器与分布式缓存
> **写在前面:** 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,`写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新`。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!个人小站:[http://alices.ibilibili.xyz/](http://alices.ibilibili.xyz/) , 博客主页:[https://alice.blog.csdn.net/](http原创 2020-08-01 23:45:40 · 3860 阅读 · 49 评论 -
快速入门Flink (5) ——DataSet必知必会的16种Transformation操作(超详细!建议收藏!)
> **写在前面:** 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,`写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新`。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!个人小站:[http://alices.ibilibili.xyz/](http://alices.ibilibili.xyz/) , 博客主页:[https://alice.blog.csdn.net/](http原创 2020-07-29 16:12:30 · 5112 阅读 · 47 评论 -
快速入门Flink (4) —— Flink批处理的DataSources和DataSinks,你都掌握了吗?
> **写在前面:** 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,`写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新`。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!个人小站:[http://alices.ibilibili.xyz/](http://alices.ibilibili.xyz/) , 博客主页:[https://alice.blog.csdn.net/](http原创 2020-07-25 23:59:30 · 3343 阅读 · 30 评论 -
快速入门Flink (3) —— Flink的运行架构
写在前面: 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!个人小站:http://alices.ibilibili.xyz/ , 博客主页:https://alice.blog.csdn.net/尽管当前水平可能不及各位大佬,但我还是希望自己能够做得更好,因为一天的生活就是一生的缩影。.原创 2020-07-20 00:02:32 · 3625 阅读 · 43 评论 -
快速入门Flink (2) —— Flink 集群搭建
写在前面: 博主是一名大数据的初学者,昵称来源于《爱丽丝梦游仙境》中的Alice和自己的昵称。作为一名互联网小白,写博客一方面是为了记录自己的学习历程,一方面是希望能够帮助到很多和自己一样处于起步阶段的萌新。由于水平有限,博客中难免会有一些错误,有纰漏之处恳请各位大佬不吝赐教!个人小站:http://alices.ibilibili.xyz/ , 博客主页:https://alice.blog.csdn.net/尽管当前水平可能不及各位大佬,但我还是希望自己能够做得更好,因为一天的生活就是一生的缩影。.原创 2020-07-17 14:35:47 · 4545 阅读 · 36 评论 -
快速入门Flink (1) —— Flink的简介与架构体系
文章目录一、Flink 的简介1.1 Flink的引入1.2 什么是 Flink1.3 Flink 流处理特性1.4 Flink 基石1.5 批处理与流处理一、Flink 的简介1.1 Flink的引入 这几年大数据的飞速发展,出现了很多热门的开源社区,其中著名的有 Hadoop、Storm, 以及后来的 Spark,他们都有着各自专注的应用场景。Spark 掀开了内存计算的先河,也以内存为赌注,赢得了内.原创 2020-07-16 16:30:54 · 4494 阅读 · 35 评论