- 博客(37)
- 资源 (1)
- 收藏
- 关注
转载 两阶段提交(2PC)及其在Flink Exactly-once中的应用
来源:jianshu.com/p/02d6d1103746作者:LittleMagic大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走...
2019-09-28 16:36:16 798
转载 关于Pulsar与Kafka的一些比较和思考
作者:Sijie Guo来源:https://streaml.io/blog/pulsar-streaming-queuing大数据技术与架构点击右侧关注,大数据开发领域...
2019-09-27 00:00:00 471
转载 Phoenix全局索引设计实践
大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!概述全局索引是Phoenix的重要特性,合理的使用二级索引能降低查询延时,让集...
2019-09-26 00:22:48 239
转载 Flink中资源管理机制解读与展望
来源:Flink China Meetup北京作者:宋辛童大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!By大数据技术与架...
2019-09-25 01:00:00 298
转载 Cassandra原理 | Apache Cassandra简介
Apache Cassandra 是一个开源的、分布式、无中心、弹性可扩展、高可用、容错、一致性可调、面向行的数据库,它基于 Amazon Dynamo 的分布式设计和 ...
2019-09-25 01:00:00 533
转载 Apache Kylin 在美团数十亿数据 OLAP 场景下的实践
大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!By大数据技术与架构场景描述:美团各业务线存在大量的OLAP分析场景,需要基...
2019-09-24 00:00:00 317
转载 HBase实践 | 数据人看Feed流-架构实践
背景Feed流:可以理解为信息流,解决的是信息生产者与信息消费者之间的信息传递问题。我们常见的Feed流场景有:手淘,微淘提供给消费者的首页商品信息,用户关注店铺的新消息...
2019-09-24 00:00:00 729
转载 Flink 实战 | 贝壳找房基于Flink的实时平台建设
来源:Flink China Meetup北京作者:刘力云大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!By大数据技术与架...
2019-09-23 00:41:20 288
转载 Google 实现量子霸权!3分20秒运算,世界第一超算要跑1万年!
大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!By大数据技术与架构场景描述:谷歌宣称“量子霸权”已经实现,他们首次在实验中...
2019-09-22 15:09:10 731
转载 HBase实践 | HBase TB级数据规模不停机迁移最佳实践
背景有关HBase集群如何做不停服的数据迁移一直都是云HBase被问的比较多的一个问题,目前有许多开源的工具或者HBase本身集成的方案在性能、稳定性、使用体验上都不是很...
2019-09-22 15:09:10 598
转载 使用 Kubernetes 部署 Flink 应用
作者:薄荷脑https://blog.csdn.net/zjerryj/article/details/100063858大数据技术与架构点击右侧关注,大数据开发领域最强...
2019-09-21 18:57:58 376
转载 Hadoop YARN:调度性能优化实践
背景YARN作为Hadoop的资源管理系统,负责Hadoop集群上计算资源的管理和作业调度。美团的YARN以社区2.7.1版本为基础构建分支。目前在YARN上支撑离线业务...
2019-09-20 00:00:00 210
转载 使用 Apache Flink 开发实时ETL
来源:薄荷脑的博客作者:薄荷脑大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!By大数据技术与架构场景描述:本文将介绍如何使...
2019-09-20 00:00:00 305
原创 Flink CheckPoint奇技淫巧 | 原理和在生产中的应用
简介Flink本身为了保证其高可用的特性,以及保证作用的Exactly Once的快速恢复,进而提供了一套强大的Checkpoint机制。Checkpoint机制是Flink可靠性的基石,可以保证Flink集群在某个算子因为某些原因(如异常退出)出现故障时,能够将整个应用流图的状态恢复到故障之前的某一状态,保 证应用流图状态的一致性。Flink的Checkpoint机制原理来自“Chandy-L...
2019-09-19 00:16:50 1176
转载 大数据开发体系,进来了解一下?
“5G失败、物联网已死、鼓吹大数据无用论”打开手机又是承接今日份的“丧”,这种丧味十足的帖子我们已经被投喂得太多了,还是原来的配方,还是熟悉的味道,说这些话的人,多少显得...
2019-09-18 08:30:00 449
转载 一份优秀的简历该长成什么样
大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!来源:王知无作者:王知无为什么写这篇文章后台有朋友私信我帮忙修改简历,我给了...
2019-09-18 08:30:00 260
转载 全网第一 | Flink学习面试灵魂40问答案,文末有福利!
大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!来源:王知无作者:王知无By 暴走大数据场景描述:这是一份Flink学习面试指...
2019-09-17 00:28:28 424
原创 全网第一份 | Flink学习面试灵魂40问,看看你能答上来几个?
大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!来源:王知无作者:王知无By暴走大数据场景描述:这是一份Flink学习面试指...
2019-09-16 00:29:33 918
转载 你需要的不是实时数仓 | 你需要的是一款强大的OLAP数据库(下)
来源:大数据技术与架构作者:王知无大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!By大数据技术与架构场景描述:今年有个现象...
2019-09-15 00:10:12 241
转载 助力秋招-独孤九剑荡剑式 | Java语言&基础面试题
来源:大数据技术与架构作者:编辑组,编辑组现在就剩我一个人:王知无。一个人就是一支队伍。大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴...
2019-09-13 08:39:20 276
转载 Hive和Hbase的各自适用场景
来源:https://www.zhihu.com/question/21677041/answer/185664626作者:有点文大数据技术与架构点击右侧关注,大数据开发...
2019-09-13 08:39:20 834
转载 大数据平台演进之路 | 淘宝 & 滴滴 & 美团
作者:王知无大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!声明:本文参考了淘宝/滴滴/美团发表的关于大数据平台建设的文章基础...
2019-09-12 00:00:00 311
转载 用Flink取代Spark Streaming!知乎实时数仓架构演进
来源:知乎数据工程团队作者:知乎数据工程团队声明:本文版权归知乎数据团队所有,转载请自行联系。大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关...
2019-09-11 08:30:00 301
转载 Flink实时数仓 | 美团点评实战
来源: Apache FlinkCommunity China作者:黄伟伦声明: 本文中所有技术文档版权归作者本人及Flink中文社区所有,严禁商用!By大数据技术与架构场景描述:本文介绍了美团点评使用Flink建设实时数据仓库的经验。关键词:Flink 实时数仓...
2019-09-10 00:00:00 517
转载 好书推荐:这本书帮你实现业务架构"知行合一"
来源:机械工业出版社华章公司声明:本文经授权转载,版权归机械工业出版社华章公司所有,需要转载请自行联系。大数据技术与架构点击右侧关注,大数据开发领域最强公众号!暴走大数据点击右侧关注,暴走大数据!By大数据技术与架构场景描述:今天给大家推荐一部从方法论和工程实践双维度阐述企业级业务架构设计的著作:《企业级业务架构设计:方法论与实践》...
2019-09-10 00:00:00 529
转载 助力秋招-独孤九剑破剑式 | 10家企业面试真题
来源:https://dwz.cn/HNZhWiD4作者:在IT中穿梭旅行 ·逆流而上Mr李By大数据技术与架构场景描述:这篇文章是来自一个《大数据技术与架构》的一个...
2019-09-09 00:00:00 1191
原创 大数据方向学习进阶知识图谱
总体描述:大数据开发岗位技能树,学习和复习总纲。关键词:面试 大数据 大纲正所谓,无招胜有招。愿读到这篇文章的技术人早日明白并且脱离技术本身,早登彼岸。一切技术最终只是雕虫小技。大纲本系列主题是大数据开发面试指南,旨在为大家提供一个大数据学习的基本路线,完善数据开发的技术栈,以及我们面试一个大数据开发岗位的时候,哪些东西是重点考察的,这些公司更希望面试者具备哪些技能。本...
2019-09-08 20:51:10 2803 1
转载 补齐短板 | 看阿里巴巴如何玩转Flink+Hive
来源:0907 Flink Meetup上海站作者:章剑锋 ·阿里巴巴By大数据技术与架构场景描述:SQL 是大数据领域中的重要应用场景,为了完善 Flink 的生...
2019-09-08 00:00:00 350
原创 剑谱总纲 | 大数据方向学习面试知识图谱
作者:大数据技术与架构By大数据技术与架构场景描述:大数据开发岗位技能树,学习和复习总纲。关键词:面试 大数据 大纲正所谓,无招胜有招。愿读到这篇文章的技术人早日明白并...
2019-09-07 00:00:00 309
转载 基于Flink和Kafka构建批流一体的数据集成平台
来源:Kafka-Flink Meetup深圳站作者:陈肃正文欢迎点赞+收藏+转发朋友圈素质三连点下「在看」,月入百万! ...
2019-09-07 00:00:00 997 1
转载 Flink CEP在哈啰出行的应用
来源:ververica.cn作者:刘博·哈啰出行By大数据技术与架构场景描述:Flink CEP 是 Flink 的复杂处理库。它允许用户快速检测无尽数据流中的复杂模...
2019-09-06 00:00:00 474
转载 科学使用HBase Connection
为什么要写这篇小文章?因为偶然在技术交流群里看到了如下的问题。这个问题的答案简单而不简单:HBase客户端是不需要维护连接池的,或者说,Connection对象已经帮我们...
2019-09-06 00:00:00 454
转载 OLAP红与黑 | 也许你应该考虑一下Druid
By大数据技术与架构场景描述:Druid是一个专为大型数据集上的高性能切片和OLAP分析而设计的数据存储。Druid最常用作为GUI分析应用程序提供动力的数据存储,或者...
2019-09-05 00:00:00 320
转载 Apache Phoenix系列 | 真 · 从入门到精通
来源: 云栖社区作者: 瑾谦By大数据技术与架构文章简介:Phoenix是一个开源的HBASE SQL层。它不仅可以使用标准的JDBC API替代HBASE clien...
2019-09-03 00:00:00 6096 3
转载 最新 | Flink1.9来袭,Kafka x Flink Meetup深圳站精华(附PPT下载)
来源:Flink中文站 · ververica.cn作者:ververica.cnBy大数据技术与架构描述:银烛秋光冷画屏,轻罗小扇扑流萤。天阶夜色凉如水,卧看牵牛织女...
2019-09-02 00:00:00 486
原创 大数据面试通关手册|Spark面试题(三)
⭐⭐欢迎关注博客主页:https://blog.csdn.net/u013411339⭐⭐欢迎点赞 👍 收藏 ⭐留言 📝 ,欢迎留言交流!⭐⭐本文由【王知无】原创,首发于 CSDN博客!⭐⭐本文首发CSDN论坛,未经过官方和本人允许,严禁转载!39. Spark的UDF?因为目前 Spark SQL 本身支持的函数有限,一些常用的函数都没有,比如 len, concat...etc 但是使用 UDF 来自己实现根据业务需要的功能是非常方便的。Spark SQL UDF 其实是一个 Scal..
2019-09-01 00:00:00 1704
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人