![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop
文章平均质量分 78
sofuzi
这个作者很懒,什么都没留下…
展开
-
Hadoop安装(版本一)———Ubuntu16.04 下 hadoop的安装与配置(伪分布式环境)
前言:hadoop的安装对于新的学习者来说是一项比较复杂的工作。就算是安装同样的版本也会因为电脑配置的不同和个人操作的失误产生不同的问题。因此我在网上找了几个不同的安装hadoop的教程供大家参考。这几个教程大同小异,大家在安装的时候可以相互参考,对应自己的问题找出解决办法。如果还是遇到问题那就需要研读官网http://www.apache.org/的安装方法,事实上,这也是安装学习hadoop最...转载 2018-03-24 11:00:42 · 320 阅读 · 0 评论 -
Hadoop安装(版本二)——大数据处理平台Hadoop之安装(基于ubuntu的Hadoop2.9.0,2.X.X同适用)
前言:hadoop的安装对于新的学习者来说是一项比较复杂的工作。就算是安装同样的版本也会因为电脑配置的不同和个人操作的失误产生不同的问题。因此我在网上找了几个不同的安装hadoop的教程供大家参考。这几个教程大同小异,大家在安装的时候可以相互参考,对应自己的问题找出解决办法。如果还是遇到问题那就需要研读官网http://www.apache.org/的安装方法,事实上,这也是安装学习hadoop最...转载 2018-03-24 11:05:56 · 840 阅读 · 0 评论 -
Hadoop安装(版本三)——Hadoop安装教程_单机/伪分布式配置_Hadoop2.6.0/Ubuntu14.04
前言:hadoop的安装对于新的学习者来说是一项比较复杂的工作。就算是安装同样的版本也会因为电脑配置的不同和个人操作的失误产生不同的问题。因此我在网上找了几个不同的安装hadoop的教程供大家参考。这几个教程大同小异,大家在安装的时候可以相互参考,对应自己的问题找出解决办法。如果还是遇到问题那就需要研读官网http://www.apache.org/的安装方法,事实上,这也是安装学习hadoop最...转载 2018-03-24 11:08:33 · 273 阅读 · 0 评论 -
hadoop 生态圈(pig,hive,hbase,ZooKeeper,Sqoop)
转载于:https://blog.csdn.net/chaofanwei/article/details/40982435 chaofanwei hadoop是有apache基金会所开发的分布式系统基础架构,其主要提供了两方面的功能:分布式存储和分布式计算。其中分布式存储是分布式计算的基础,在hadoop的实现里面,提供了分布式存储的接口,并自己实现了一个分布式存储的实现即HDFS,但并...转载 2018-04-04 11:05:15 · 857 阅读 · 0 评论 -
MapReduce:实现join的几种方法
reduce side joinreduce side join是一种最简单的join方式,其主要思想如下: 在map阶段,map函数同时读取两个文件File1和File2,为了区分两种来源的key/value数据对,对每条数据打一个标签> (tag),比如:tag=0表示来自文件File1,tag=2表示来自文件File2。即:map阶段的主要任务是对不同文件中的数据打标签。>...转载 2018-07-28 21:08:58 · 12479 阅读 · 0 评论