大数据入门
1为什么学习大数据?
找份更高收入的工作做。
2什么是大数据?
举例:商品推荐:(1)如何存储大量的订单。
(2)大量的订单如何筛选计算。
天气预报:(1)大量的天气数据如何存储。(2)大量的数据如何计算
大数据的核心:
(1)数据的存储—分布式文件系统(分布式存储)
(2)数据的计算;(分布式计算)
大数据框架:(1)hadoop:基于JAVA语言开发
(2)spark:基于scala语音,scala语音基于java语言;
3学习大数据的基础和路线
(1)java基础---->类,继承,反射,I/O,泛型等javaSe内容;
(2)linux基础 ---->创建文件,目录,VI编辑器。
(3)hadoop的学习:体系。原理,编程
第一阶段:HDFS,HBASE等NOSQL数据库
第二阶段:数据分析引擎 ----》hive,pig
数据采集引擎----》sqoop.flume;
第三阶段:HUE,WEB管理工具
ZOOKEEPER:实现hadoop的HA
OOZIE:工作流引擎
(4)SPARK的学习:
scala编程语言
spark core----》基于内存,数据的计算
spark SQl —>类似oracle的SQL语言
大数据学习之路--初章
最新推荐文章于 2024-07-24 17:33:05 发布