学习hadoop学什么?

转载 2016年08月30日 20:13:17

转载网址:http://www.bi168.cn/thread-12847-1-1.html


大数据依然是火的不要不要的,作为大数据基础的hadoop自然也会备受重视,那么Hadoop的使用场景有哪些?小编给大家介绍下。

1,大数据量存储:分布式存储

2,日志处理:Hadoop擅长这个

3,海量计算:并行计算

4,ETL:数据抽取到Oracle、mysql、DB2、mongdb及主流数据库

5,使用HBase做数据分析:用扩展性应对大量的写操作—Facebook构建了基于HBase的实时数据分析系统

6,机器学习:比如Apache Mahout项目

7,搜索引擎:hadoop + lucene实现

8,数据挖掘:目前比较流行的广告推荐,9,用户细分特征建模

10,个性化广告推荐,

11,智能仪器推荐

捎带,小编向大家介绍Hadoop学习方面的一些事项。希望对新手学习Hadoop有所帮助。

学习hadoop学什么?

主要学习hadoop的核心组件:hdfs、mapreduce、yarn。它们是hadoop最最核心的部分。在它们的基础上,我们还可以选择性的学习hadoop生态圈中的日志收集工具flume、数据仓库hive、分布式数据库hbase、数据导入导出工具sqoop。

学习hadoop需要什么基础?

hadoop需要具备javaSE的基础知识,对于javaEE(jsp/servlet/三大框架)没有要求。需要熟练使用linux系统。大体上,有这些预备知识就够了。也有人说,只需要具备javaSE知识就足够了。

学完hadoop会影响javaEE工作吗?

严格的讲,hadoop与javaEE是两个不同的发展思路,hadoop倾向于底层数据处理部分,javaEE负责系统开发,二者前后相继,没有交叉,相辅相成。

学习hadoop对算法和数据结构要求高吗?

一般海量数据的处理都是自定义存储结构,实现自己的算法,这是业界的通用处理思路。这对普通程序员而言要求还是很高的。hadoop的优点就是进行了封装,写的算法都是偏向于业务的,不需要创造算法。因此大可放心。但是,如果工作的公司不使用hadoop去处理大数据,这时候对算法和数据结构的要求就高了。
- 本文出自BI168大数据社区,更多精彩请点击 原文地址:http://www.bi168.cn/>>http://www.bi168.cn/thread-12847-1-1.html

Hadoop安装学习-入门教程

  • 2017年11月30日 17:58
  • 1.27MB
  • 下载

从零开始学Hadoop——浅析MapReduce(二)

上篇博客我们介绍了MapReduce的基本概念,并且对它的运行原理做了一些解析,今天我们来通过一个实际例子来深刻体会一下它的运行过程。 至此,我们将Hadoop的两大核心学习完了,但是对我们...

hadoop学习资料地址

  • 2012年02月27日 15:48
  • 44KB
  • 下载

从零开始学Hadoop----浅析HDFS(二)

上一篇,我们简单介绍了一下Hadoop的核心之一HDFS,对其中的一些概念有了一定的了解。今天我们来看看HDFS的一些原理解析。 今天我们接着上次介绍了一下HDFS的概念之后,我们对HDFS的...

hadoop学习 pdf

  • 2012年09月13日 20:29
  • 5.48MB
  • 下载

hadoop学习笔记(六)

  • 2013年11月12日 14:56
  • 31KB
  • 下载

从零开始学Hadoop----初识

我们知道大数据的时代已经到来,之前就给大家分享了应对大数据的非关系型数据库redis。今天,我们再来看看处理和分析海量数据的神器——hadoop。 今天我们简单认识了一下Hadoop,知道了h...

hadoop学习笔记

  • 2012年09月13日 17:20
  • 431KB
  • 下载
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:学习hadoop学什么?
举报原因:
原因补充:

(最多只允许输入30个字)