大数据是什么?可以用来做什么?核心是什么?

它是什么

它能用来做什么

它怎么用

它的工作原理是什么

1、什么是大数据技术

大数据技术是一门针对海量数据处理的编程技术

核心技术:分布式存储、分布式运算

2、大数据技术用来干嘛?

电商:分析用户浏览、购物的行为,挖掘数据,分析规律,以便及时精准推送;

金融:征信分析、运营分析。。。

头条:提供更加个性化的内容推送服务。

3、大数据技术的核心技术组件有哪些?

Hadoop、spark、flink等技术生态。

4、Hadoop是什么?

它是一套大数据技术组件。

5、Hadoop的核心技术组件有哪些?

(1)、HDFS        分布式文件系统         解决文件存储问题,实质是提供一套跨机器的文件管理服务

(2)、MAPERDUCE         分布式运算程序编程框架        降低分布式运算程序的开发难度,提高开发效率

(3)、YARM         分布式运算资源调度系统        解决分布式运算程序的启动、资源调度、资源回收等问题

(4)、其他外部组件:Hive是一个基于MAPERUCE和HDFS的一个sql工具

                                      Hbase是一个基于HDFS实现的分布式nosql数据库

                                      Flume是一个分布式日志采集系统

                                      Sqoop是一个数据迁移工具,可以将数据从关系型数据库迁到Hadoop数据库

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值