![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据必知必会
文章平均质量分 74
AIMaynor
个人博客:maynor1024.live,ai网站:api.maynor1024.live
展开
-
❤️大数据开发必备:推荐7款大数据开发神器工作效率提升1000%【推荐收藏】
前言大家好,我是ChinaManor,直译过来就是中国码农的意思,我希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,平凡但不甘于平庸的人。第一款原创 2021-07-10 10:06:40 · 6538 阅读 · 53 评论 -
大数据面试:面试官要求我了解过Presto——Presto到底是个什么东西
前言大家好,我是程序员manor,我希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,平凡但不甘于平庸的人。事情是这样的我在实习僧App上发现一家公司非常匹配我的需求~城市匹配技能匹配福利匹配还是一家游戏公司(典型的钱多离家近,事估计少不了了 )三配下来我不得不认真研究该公司的职位要求:一番自我检查发现,竟然有一项大数据组件听都没听过:presto这到底是个啥?有什么用?适合在哪些业务场景?如此灵魂三问后,好学如本码农自当好好研究一番。Presto是什么1.原创 2021-08-01 11:12:00 · 3203 阅读 · 13 评论 -
一图胜千言:大数据入门必备的16张数据流转图(建议收藏)
前言大家好,我是ChinaManor,直译过来就是中国码农的意思,我希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,平凡但不甘于平庸的人。以下是我在学大数据时学大数据不得不背的15张数据流转图首先必须给HDFS读写数据图排面,学习大数据开发第一座的大山!1.HDFS读写数据HDFS读数据图:HDFS写数据图:2.MapReduce 的 Shuffle 过程MapReduce 的详细工作流程:3.Yarn的Job提交流程4.Yarn 的调度器分类FIFO 调度器(先原创 2021-06-29 21:35:20 · 7631 阅读 · 16 评论 -
一文快速搞定Redis_数据类型及JavaApi操作
以上便是一文快速搞定Redis愿你读过之后有自己的收获,如果有收获不妨一键三连一下~!原创 2021-06-17 20:35:43 · 702 阅读 · 5 评论 -
一文快速搞懂系列__一文快速搞懂SuperSet[实战案例]
一文快速搞懂系列讲究快速入门掌握一个新的大数据组件,帮助新手了解大数据技术,以下是系列文章:原创 2021-06-13 20:46:58 · 5436 阅读 · 6 评论 -
一文快速搞懂Kudu到底是什么
近两年, KUDU 在大数据平台的应用越来越广泛,在 阿里、小米、网易 等公司的大数据架构中,KUDU 都有着不可替代的地位。原创 2021-06-08 16:37:47 · 7596 阅读 · 13 评论 -
大数据必知必会系列——萌新提问怎么定义HiveUDF函数?能否给个示例
文章目录引言下面为大家分享Hive中UDF如何自定义总结引言大家好,我是ChinaManor,直译过来就是中国码农的意思,俺希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,一个平凡而不平庸的人。 学习大数据差不多一年了,笔者最近在整理大数据学习的笔记资料,这个系列是整理的一些大数据必知必会的知识。下面为大家分享Hive中UDF如何自定义简单示例:UDF开发实例简单UDF示例第一步:创建maven java 工程,导入jar包<repositories>原创 2021-06-07 22:45:53 · 379 阅读 · 2 评论 -
大数据必知必会系列——面试官问能不能手写一个spark程序?[新星计划]
@[toc]## 引言 > 大家好,我是ChinaManor,直译过来就是中国码农的意思,俺希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,一个平凡而不平庸的人。 > 学习大数据差不多一年了,笔者最近在整理大数据学习的笔记资料,这个系列是整理的一些大数据必知必会的知识。面试官问:看你简历上写spark一项是熟练程度,能不能给我手写一个spark程序?我:当然能(不行)当初写简历时为了不留出那么多空造的,哪会写什么spa...原创 2021-05-31 09:11:34 · 868 阅读 · 12 评论 -
大数据必知必会系列——数仓分层架构及三层架构流程[新星计划]
文章目录引言数据仓库典型分层结构:`3层结构【ODS层、DW层和DA层】`数据分层的好处:京东的`数据仓库分层模式`,是根据标准的模型演化而来。总结引言大家好,我是ChinaManor,直译过来就是中国码农的意思,俺希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,一个平凡而不平庸的人。 学习大数据差不多一年了,笔者最近在整理大数据学习的笔记资料,这个系列是整理的一些大数据必知必会的知识。数据仓库典型分层结构:3层结构【ODS层、DW层和DA层】1)、ODS层数据:原始数据,往往来源原创 2021-05-28 21:29:52 · 5400 阅读 · 3 评论 -
大数据必知必会系列——面试官一问就懵:你们做过的项目技术是如何选型的?[新星计划]
文章目录引言(一)你们的项目框架版本是如何选型的?(二)服务器选型(三)集群规模(四)人员配置参考总结引言 大家好,我是ChinaManor,直译过来就是中国码农的意思,俺希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,一个平凡而不平庸的人。 学习大数据差不多一年了,笔者最近在整理大数据学习的笔记资料,这个系列是整理的一些大数据必知必会的知识。面试官前面问技术使用背的(划掉)行云流水,那接下来谈谈项目选型吧,顿时懵了那我们就来好好说一下除了项目代码以外的东西。(一)你们的项目框架版本原创 2021-05-27 23:52:30 · 2188 阅读 · 13 评论 -
大数据必知必会系列__面试官问能不能徒手画一下你们的项目架构[新星计划]
文章目录引言一.ETL架构及Kudu框架二.OGG及Canal数据同步架构图总结引言大家好,我是ChinaManor,直译过来就是中国码农的意思,俺希望自己能成为国家复兴道路的铺路人,大数据领域的耕耘者,一个平凡而不平庸的人。学习大数据差不多一年了,笔者最近在整理大数据学习的笔记资料,这个系列就是整理的一些大数据必知必会的知识。一.ETL架构及Kudu框架二.OGG及Canal数据同步架构图总结徒手画项目结构也是面试时经常被问到的,有时间可以用笔画一画,加深对项目的印象~原始原创 2021-05-22 14:08:07 · 1699 阅读 · 9 评论