2021年08月_zhisheng_blog

12月 11月 10月 09月 08月 07月 06月 05月 04月 03月 02月 01月

转载用了ElasticSearch后，查询起飞了！

“ 最近接触的几个项目都使用到了 Elasticsearch (以下简称 ES ) 来存储数据和对数据进行搜索分析，就对 ES 进行了一些学习。本文整理自我自己的一次技术分享。图片来自 P...

2021-08-31 08:41:00 116

转载聊聊 Kafka 为什么这么快原因之一

前言关于Kafka的一个灵魂拷问：它为什么这么快？或者说，为什么它能做到如此大的吞吐量和如此低的延迟？有很多文章已经对这个问题给出了回答，但本文只重点研究其中的一个方向，即对page ca...

2021-08-30 08:41:00 139

转载千岛湖之行

分享一下这两天千岛湖之旅拍的视频住宿沪马游乐缆车上拍的，景色很美上面这个透明玻璃桥，对于恐高的可吓坏了，????。整个沪马项目还挺多，觉得最好玩的还是属于最后下山的滑板车，开的贼快。晚餐鱼...

2021-08-29 22:16:28 140

转载唯品会亿级数据服务平台实践

数据服务是数据中台体系中的关键组成部分。作为数仓对接上层应用的统一出入口，数据服务将数仓当作一个统一的 DB 来访问，提供统一的 API 接口控制数据的流入及流出，能够满足用户对不同类型数...

2021-08-27 08:41:00 180

转载聊聊数据仓库建设

数据仓库是一个面向主题的、集成的、随时间变化的、但信息本身相对稳定的数据集合，用于对管理决策过程的支持。数仓建设思路数仓主要是围绕着数据使用方与数据开发方诉求进行建设；因此在开始规划数仓建...

2021-08-26 08:41:00 127

转载聊聊实时数仓架构设计

什么是实时数仓首先需要明确什么是实时数仓，百度百科与维基百科都没有给出具体说明，哪究竟什么才是实时数仓呢？是不是可以通过实时流实时获取数据就是实时数仓？或者说流批一体就是实时数仓？在或者全...

2021-08-20 12:22:10 371

转载 Flink CDC 2.0 Make All Happy

摘要：本文由社区志愿者陈政羽整理，内容来源自阿里巴巴高级开发工程师徐榜江 (雪尽) 7 月 10 日在北京站 Flink Meetup 分享的《详解 Flink-CDC》。深入讲解了最新发...

2021-08-19 08:40:20 223

转载 21 款 yyds 的 IDEA插件

最近，闲来无事，为了改变一下枯燥的编程环境，特地搜寻了下有助提升代码功力的插件.1、Stackoverflow这个插件其实是最实用的插件，程序猿遇到的问题，基本都能找到回答，但是它使用的...

2021-08-18 08:50:02 159

转载 Lenovo x DorisDB：简化数据处理链路，极大提升BI分析效率

Lenovo联晟智达隶属于全球PC领导厂商联想集团，致力于打造科技驱动、柔性敏捷、服务体验一流的智慧物流生态平台，面向产业端企业提供综合物流解决方案，成为服务于中国及全球客户的智能供应链科...

2021-08-17 08:41:00 203

转载实时计算！急招！！

朋友公司招人，找工作的可以看过来，实时计算，大数据开发/专家，各种岗位都有！急招！考虑的可以直接微信和我说，我可以直接帮忙推到对应岗位负责人那去，省去麻烦流程！有我微信的可以直接私聊我，没...

2021-08-15 20:01:00 855

转载揭秘字节跳动埋点数据实时动态处理引擎（附源码）

1.序篇-先说结论宝贝们，还记得前几天博主去的火山引擎大数据场嘛，其中比较令大家感兴趣的就是最后一讲，字节一站式埋点平台的 flink 标准化清洗及拆流任务。其中大家感觉比较流啤的就是的就...

2021-08-13 09:01:00 1709

转载致ClickHouse用户的一封信

亲爱的ClickHouse用户：您好！感谢您在百忙之中抽出时间来阅读此信。虽然未曾谋面，但我们关注您已经有很长一段时间了。您的企业非常重视数据分析工作，想通过数据分析来提升运营效率，发...

2021-08-11 08:41:00 175

转载记一次 Flink 反压问题排查过程

问题出现根据subtask的watermark发现延迟了10几分钟，然后查看是否有异常或者BackPressure的情况最终发现，source->watermarks->fil...

2021-08-10 09:00:27 1254

转载贝壳找房 x DorisDB：全新统一的极速OLAP平台实践

贝壳找房作为“科技驱动的新居住服务商”，致力于推进居住服务产业数字化、智能化进程，通过助力优质服务者，为三亿中国家庭提供包括二手房、新房、租赁、装修等全方位的高品质、高效率居住服务。贝壳大...

2021-08-09 08:41:00 249

转载 ClickHouse在BIGO的实践及优化

视频直播回放链接 : https://www.bilibili.com/video/BV1sg411u7xd

2021-08-05 08:43:41 108

转载爱奇艺数据中台建设方案

数据中台的产生：数据工作的痛点、数据中台的产生、中台的实质爱奇艺数据中台的定义：理解数据中台、数据中台的发展历程、输出和定位爱奇艺数据中台的建设：中台建设、Pingback体系、数仓体系、...

2021-08-04 08:41:19 121

转载 2万长文，一文搞懂Kafka

1、为什么有消息系统解耦合异步处理例如电商平台，秒杀活动。一般流程会分为：1:风险控制、2：库存锁定、3：生成订单、4：短信通知、5：更新数据通过消息系统将秒杀活动业务拆分开，将不急需...

2021-08-03 08:46:48 383

转载小红书 x DorisDB：实现数据服务平台统一化，简化数据链路，提升高并发极速查询能力...

小红书是年轻人的生活记录、分享平台，用户可以通过短视频、图文等形式记录生活点滴，分享生活方式。在2017年后，随着业务类型和用户体量的爆炸式增长，各类数据分析的需求以及应用系统的数据需求快...

2021-08-02 08:41:00 415

Flink 全网最全资源（视频、博客、PPT、入门、原理、实战、性能调优、源码解析、问答等持续更新）

Flink 全网最全资源（视频、博客、PPT、入门、原理、实战、性能调优、源码解析、问答等持续更新），包含 Flink 入门、概念、原理、实战、性能调优、大型案例、源码解析

2019-10-25

1、Flink 源码解析 —— 源码编译运行 2、Flink 源码解析 —— 项目结构一览 3、Flink 源码解析—— local 模式启动流程 4、Flink 源码解析 —— standalonesession 模式启动流程 5、Flink 源码解析 —— Standalone Session Cluster 启动流程深度分析之 Job Manager 启动 6、Flink 源码解析 —— Standalone Session Cluster 启动流程深度分析之 Task Manager 启动 7、Flink 源码解析 —— 分析 Batch WordCount 程序的执行过程 8、Flink 源码解析 —— 分析 Streaming WordCount 程序的执行过程 9、Flink 源码解析 —— 如何获取 JobGraph？ 10、Flink 源码解析 —— 如何获取 StreamGraph？ 11、Flink 源码解析 —— Flink JobManager 有什么作用？ 12、Flink 源码解析 —— Flink TaskManager 有什么作用？ 13、Flink 源码解析 —— JobManager 处理 SubmitJob 的过程 14、Flink 源码解析 —— TaskManager 处理 SubmitJob 的过程 15、Flink 源码解析 —— 深度解析 Flink Checkpoint 机制 16、Flink 源码解析 —— 深度解析 Flink 序列化机制 17、Flink 源码解析 —— 深度解析 Flink 是如何管理好内存的？

2019-06-04

Flink 全网最全资源（视频、博客、PPT、入门、实战、源码解析、问答等持续更新）.md

Flink 全网最全资源（视频、博客、PPT、入门、实战、源码解析、问答等持续更新） 1、Flink 源码解析 —— 源码编译运行 2、Flink 源码解析 —— 项目结构一览 3、Flink 源码解析—— local 模式启动流程 4、Flink 源码解析 —— standalonesession 模式启动流程 5、Flink 源码解析 —— Standalone Session Cluster 启动流程深度分析之 Job Manager 启动 6、Flink 源码解析 —— Standalone Session Cluster 启动流程深度分析之 Task Manager 启动 7、Flink 源码解析 —— 分析 Batch WordCount 程序的执行过程 8、Flink 源码解析 —— 分析 Streaming WordCount 程序的执行过程 9、Flink 源码解析 —— 如何获取 JobGraph？ 10、Flink 源码解析 —— 如何获取 StreamGraph？ 11、Flink 源码解析 —— Flink JobManager 有什么作用？ 12、Flink 源码解析 —— Flink TaskManager 有什么作用？ 13、Flink 源码解析 —— JobManager 处理 SubmitJob 的过程 14、Flink 源码解析 —— TaskManager 处理 SubmitJob 的过程 15、Flink 源码解析 —— 深度解析 Flink Checkpoint 机制 16、Flink 源码解析 —— 深度解析 Flink 序列化机制 17、Flink 源码解析 —— 深度解析 Flink 是如何管理好内存的？

2019-06-04

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

http://www.54tianzhisheng.cn/