自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(7)
  • 收藏
  • 关注

原创 对于HDFS的归纳总结

该文章是我通过Hadoop权威指南第4版对于HDFS的一些简单的归纳总结(设计模式、数据块、读写流程等),语言不会特别官方,会更容易理解一点。

2021-12-08 15:46:30 1330

原创 Hive介绍

hive介绍、应用场景、设计特征、架构、基本操作(创建表、分区分桶、分隔符、数据类型、udf)、常见问题

2019-07-10 09:24:09 729

原创 zookeeper的安装搭建

Zookeeper使用java编写,运行在jvm上,所以需要提前安装并配置好好java环境,推荐Oracle jdk1.7及以上版本。首先将zookeeper安装包放到合适的位置 如:/home/soft/zookeeper解压zookeeper-3.4.7.tar.gztar -zvxf zookeeper-3.4.7.tar.gz在zoookeeper-3.4.7文...

2019-03-28 13:34:15 259

原创 MapReducer的执行流程

MapReducer工作流程图:MapReducer工作流程:------------------------------------------------mapper的工作--------------------------------------------1.mapper开始运行,调用InputFormat组件读取文件逻辑切片(逻辑切片不是block块,切片大小默认和block块大...

2019-03-28 11:07:30 817

原创 各个版本hadoop下载地址

https://archive.apache.org/dist/hadoop/common/

2019-01-21 19:18:27 776

原创 Hadoop全分布式集群搭建详细步骤

我们都知道搭建集群一般需要最少三台的虚拟机,所以我们如果想要搭建集群首先要学会搭建虚拟机,虚拟机可以是VMware或者是oracle的virtualBox,在这我使用的是VMware。然后还要配备镜像,推荐大家使用centos6.5(也可以自己练习一下centos7.0)。...

2019-01-07 08:20:44 3046 2

原创 VMware虚拟机搭建详细步骤

我们都知道搭建集群一般需要最少三台的虚拟机,所以我们如果想要搭建集群首先要学会搭建虚拟机,虚拟机可以是VMware或者是oracle的virtualBox,在这我使用的是VMware。然后还要配备镜像,推荐大家使用centos6.5(也可以自己练习一下centos7.0)。第一步:创建虚拟机1.点击创建新的虚拟机2.选择自定义(高级)然后点击下一步3.选择版本兼容性点击下一步4.选...

2019-01-04 08:03:48 12972 5

空空如也

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除