![](https://img-blog.csdnimg.cn/20201014180756922.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
CHENJIAMIAN PRO
这个作者很懒,什么都没留下…
展开
-
【Hadoop】 库
Hadoop 3种发行版本: Apache Hadoop旨在从单个服务器扩展到数千台机器,每台机器都提供本地计算和存储。(实验用,有各种JAR包冲突问题!) Hadoop CDH(企业一般选这个) HDP(不常用)Hadoop MapReduce:用于并行处理大型数据集的基于YARN的系统。Hadoop YARN:作业调度和集群资源管理的框架。Hadoop HDFS(分布式文件系统):提供对应用程序数据的高吞吐量访问的分布式文件系统。Hadoop Common:支持其他Had原创 2022-08-01 14:09:12 · 291 阅读 · 0 评论 -
【Hadoop】 软件
Map采用一组数据并将其转换为另一组数据,其中各个元素被分解为元组(键/值对)。其次,reduce任务,它将map的输出作为输入,并将这些数据元组合并成一组较小的元组。原创 2022-08-01 14:06:08 · 793 阅读 · 0 评论