学习hadoop学什么?

转载 2016年08月30日 20:13:17

转载网址:http://www.bi168.cn/thread-12847-1-1.html


大数据依然是火的不要不要的,作为大数据基础的hadoop自然也会备受重视,那么Hadoop的使用场景有哪些?小编给大家介绍下。

1,大数据量存储:分布式存储

2,日志处理:Hadoop擅长这个

3,海量计算:并行计算

4,ETL:数据抽取到Oracle、mysql、DB2、mongdb及主流数据库

5,使用HBase做数据分析:用扩展性应对大量的写操作—Facebook构建了基于HBase的实时数据分析系统

6,机器学习:比如Apache Mahout项目

7,搜索引擎:hadoop + lucene实现

8,数据挖掘:目前比较流行的广告推荐,9,用户细分特征建模

10,个性化广告推荐,

11,智能仪器推荐

捎带,小编向大家介绍Hadoop学习方面的一些事项。希望对新手学习Hadoop有所帮助。

学习hadoop学什么?

主要学习hadoop的核心组件:hdfs、mapreduce、yarn。它们是hadoop最最核心的部分。在它们的基础上,我们还可以选择性的学习hadoop生态圈中的日志收集工具flume、数据仓库hive、分布式数据库hbase、数据导入导出工具sqoop。

学习hadoop需要什么基础?

hadoop需要具备javaSE的基础知识,对于javaEE(jsp/servlet/三大框架)没有要求。需要熟练使用linux系统。大体上,有这些预备知识就够了。也有人说,只需要具备javaSE知识就足够了。

学完hadoop会影响javaEE工作吗?

严格的讲,hadoop与javaEE是两个不同的发展思路,hadoop倾向于底层数据处理部分,javaEE负责系统开发,二者前后相继,没有交叉,相辅相成。

学习hadoop对算法和数据结构要求高吗?

一般海量数据的处理都是自定义存储结构,实现自己的算法,这是业界的通用处理思路。这对普通程序员而言要求还是很高的。hadoop的优点就是进行了封装,写的算法都是偏向于业务的,不需要创造算法。因此大可放心。但是,如果工作的公司不使用hadoop去处理大数据,这时候对算法和数据结构的要求就高了。
- 本文出自BI168大数据社区,更多精彩请点击 原文地址:http://www.bi168.cn/>>http://www.bi168.cn/thread-12847-1-1.html

学习Hadoop,需要什么基础?

Hadoop需要具备javaSE的基础知识,对于javaEE(jsp/servlet/三大框架)没有要求。需要熟练使用linux系统(第一天课程有复习linux操作的时间)。大体上,有这些预备知识就够...
  • away30
  • away30
  • 2017年09月15日 11:40
  • 234

给Hadoop初学者的一些建议

我们介绍了新手学习hadoop的入门注意事项。这篇来谈谈hadoop核心知识学习。  hadoop核心知识学习:  hadoop分为hadoop1.X和hadoop2.X,并且还有hadoop生态...
  • hanghangaidoudou
  • hanghangaidoudou
  • 2016年11月14日 17:07
  • 1107

学习hadoop需要Java什么基础

hadoop需要具备javaSE的基础知识,对于javaEE(jsp/servlet/三大框架)没有要求。需要熟练使用linux系统(第一天课程有复习linux操作的时间)。大体上,有这些预备知识就够...
  • u013690761
  • u013690761
  • 2014年03月15日 01:34
  • 2000

学习hadoop需要具备基础知识

首先整体上了解Hadoop,包括hadoop是什么,能够做什么,使用场景等,不需要考虑细节问题。在有了整体上的了解后,就开始准备系统地学习hadoop。建议:勿一味学习理论知识,要注意理论与实践相结合...
  • tongxinzhazha
  • tongxinzhazha
  • 2016年08月25日 18:25
  • 1753

零基础学习hadoop到上手工作线路指导

问题导读: 1.hadoop编程需要哪些基础? 2.hadoop编程需要注意哪些问题? 3.如何创建mapreduce程序及其包含几部分? 4.如何远程连接eclipse,可能会遇到什么问题?...
  • whl632359961
  • whl632359961
  • 2016年06月15日 09:55
  • 8081

学习Hadoop的前提条件

Apache Hadoop是入门点,或者我们可以说是进入整个大数据生态系统的基础。它是大数据生态系统中大多数高级工具,应用程序和框架的基础,但是在学习Apache Hadoop时,还需要事先知道一些事...
  • boonya
  • boonya
  • 2017年01月19日 12:31
  • 587

新手都会遇到的问题 该学hadoop?还是spark?

问题: 毕业了,找的工作不是太满意。听师兄说大数据这方向不错,准备学大数据,但不知道应该学Hadoop还是Spark。 Hadoop的话我有些Java基础,估计相对容易一些。 但据说Spar...
  • away30
  • away30
  • 2017年09月18日 11:37
  • 352

hadoop学习的第二天---配置Hadoop环境(少走弯路,详细教程)

配置Hadoop是一件非常令人苦恼的事情,因为刚开始学习不知道哪里是什么功能,弄了一遍又一遍还是不行,瞬间可能放弃掉,尤其是不大熟悉Linux的人 下面我还是一步一步给大家讲解,大家跟着步骤来 用...
  • superhadoop
  • superhadoop
  • 2017年03月15日 19:39
  • 245

最近学习hadoop和spark的一些心得

对于新人来说,学习hadoop和spark最大的门槛就是如何安装它们俩,网上有很多关于这方面的信息,但是有挺多安装过程是有问题的,或者是没有具有普遍性,所以当选择错了安装教程后,有时候可能会导致浪费了...
  • chengdianxuezi
  • chengdianxuezi
  • 2015年09月18日 15:34
  • 970

零基础学习 Hadoop 该如何下手?

作者:Han Hsiao 链接:https://www.zhihu.com/question/19795366/answer/24524910 来源:知乎 著作权归作者所有。商业转载请联系作者获得授权...
  • runningwulf1
  • runningwulf1
  • 2016年04月22日 22:32
  • 335
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:学习hadoop学什么?
举报原因:
原因补充:

(最多只允许输入30个字)