hadoop

最新推荐文章于 2024-08-04 13:23:56 发布
最新推荐文章于 2024-08-04 13:23:56 发布
阅读量516 收藏
点赞数
分类专栏： hadoop 文章标签： virtualbox centos hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/claroja/article/details/77989967
版权

hadoop 概要
hadoop 文件介绍
hadoop 配置文件
hadoop hdfs 集群模板机配置
Hadoop 高可用集群(HA)

hdfs

hadoop hdfs 单机配置
hadoop hdfs 集群配置
hdfs 基本操作
hdfs java api读写
hdfs和日志业务系统

yarn&mr

hadoop yarn 单机
hadoop yarn 集群配置
hadoop Idea Win本地运行
hadoop Idea 提交任务到集群
hadoop linux提交任务
hadoop cleanup
hadoop 自定义数据类型
hadoop 倒排索引
hadoop sequence
hadoop combination
haoop 负载均衡
Hadoop Streaming

Hive

Hadoop HIVE 安装配置(单机&集群)
Hadoop HIVE 创建表
Hadoop HIVE 关联查询
Hadoop HIVE 聚合查询
Hadoop HIVE 基本数据类型
Hadoop HIVE 复合数据类型
Hadoop HIVE 基本函数
Hadoop HIVE 条件控制函数
Hadoop HIVE 自定义函数
Hadoop HIVE 窗口函数
Hadoop HIVE 条件控制函数
Hadoop HIVE JavaAPI

Hbase

Hadoop Hbase单机配置
Hadoop Hbase 安装配置
Hadoop Hbase 模型结构

工具

Hadoop sqoop
Hadoop Flume

其他

hadoop 集群常见问题
hadoop jar
局域网络配置
hadoop集群部署
HDFS
mapreduce
hadoopstreaming
HIVE
Hbase
MapReduce Python
HDFS Python

Claroja
关注
专栏目录
Hadoop安装与配置详细教程
王佳斌
04-27 16万+
【确保服务器集群安装和配置已经完成！】 前言 请根据读者的自身情况，进行相应随机应变。 我的三台CentOS7服务器： 主机：master（192.168.56.110） 从机：slave0（192.168.56.111） 从机：slave1（192.168.56.112） 每一个节点的安装与配置是相同的，在实际工作中，通常在master节点上完成安装和配置后，然后将安装目录复制到其他节点就可以，...
安装Hadoop2.10.1
慕诡的博客
04-22 5233
文章目录 前言 通过在Hadoop1安装Hadoop,然后配置相应的配置文件，最后将Hadoop 所有文件同步到其他Hadoop节点。 一、集群规划 #主机名 ‘master/hadoop1’ ‘slave01/hadoop2’ ‘slave02/hadoop3’ #启动节点 Namenode Nodemanager Nodemanager Resourcemanager
【Hadoop】Windows下安装Hadoop（手把手包成功安装）
tttzzzqqq2018的博客
07-26 3万+
【实操】Windows下安装Hadoop（手把手包成功安装）
Hadoop大数据集群搭建（超详细）
小飞飞V5的博客
05-21 3万+
本文主要介绍了Hadoop集群的搭建过程，图文详细，适合新手入门
Hadoop集群搭建
lydms的博客
02-09 2万+
Hadoop官方网站：http://hadoop.apache.org/Hadoop运行模式包括：本地模式、伪分布式模式以及完全分布式模式。本地模式：单机运行，只是用来演示一下官方案例。生产环境不用。伪分布式模式：也是单机运行，但是具备Hadoop集群的所有功能，一台服务器模拟一个分布式的环境。个别缺钱的公司用来测试，生产环境不用。完全分布式模式：多台服务器组成分布式环境。生产环境使用。
1、hadoop3.1.4简单介绍及部署、简单验证
alanchanchn的专栏
04-23 5万+
Hadoop是Apache旗下的一个用java语言实现开源软件框架，是一个开发和运行处理大规模数据的软件平台。允许使用简单的编程模型在大量计算机集群上对大型数据集进行分布式处理。HDFS（分布式文件系统）：解决海量数据存储YARN（作业调度和集群资源管理的框架）：解决资源任务调度MAPREDUCE（分布式运算编程框架）：解决海量数据计算Hadoop通常是指一个更广泛的概念——Hadoop生态圈。
Hadoop集群搭建（超级详细）
热门推荐
qq_43650672的博客
05-07 7万+
本文略长，希望各位大佬见谅！！！ 需要的安装包：jdk-8u162-linux-x64.tar.gz（ 提取码：6k1i ）、hadoop-3.1.3.tar.gz（ 提取码：07p6 ） 1 集群规划 安装VMware，使用三台Ubuntu18.04虚拟机进行集群搭建，下面是每台虚拟机的规划： 主机名 IP 用户 HDFS YARN hadoopMaster 待定 rmc0924 NameNode、DataNode NodeManager、ResourceManager hado
Hadoop 完全分布式搭建（超详细）
JIE的博客 --- moon_coder
10-24 4万+
到此为止，我们的 Hadoop 完全分布式就已经搭建完成啦！
Hadoop搭建集群
最新发布
m0_70405779的博客
08-04 4401
Hadoop集群部署是为了实现分布式存储和计算，提高大数据处理的效率和性能。1.确定集群规模和硬件资源，选择合适的操作系统和Hadoop版本，进行网络配置，确保集群内各节点之间可以互相通信。2.设置各节点的环境变量，安装和配置Java环境以及其他必要的软件和工具。3.配置Hadoop的核心组件（如HDFS和YARN）和各节点角色（如NameNode、DataNode、ResourceManager、NodeManager等），完成集群的部署。
Hadoop入门
weixin_58202386的博客
04-20 2913
一. 概念 二.环境准备 三.Hadoop生产集群搭建 四. 常见问题的解决方法
Hadoop下载 hadoop-2.9.2.tar.gz
07-06
Hadoop 是一个处理、存储和分析海量的分布式、非结构化数据的开源框架。最初由 Yahoo 的工程师 Doug Cutting 和 Mike Cafarella Hadoop 是一个处理、存储和分析海量的分布式、非结构化数据的开源框架。最初由 Yahoo...
Hadoop下载 hadoop-3.3.3.tar.gz
07-06
Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下，开发分布式程序。充分利用集群的威力进 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不...
基于Hadoop的电影影评数据分析
04-04
【基于Hadoop的电影影评数据分析】是一项大数据课程的大作业，旨在利用Hadoop的分布式处理能力来分析电影影评数据。Hadoop是一个由Apache软件基金会开发的开源框架，专为处理和存储大规模数据而设计。它由四个核心...
hadoop-3.3.6.tar.gz - hadoop 3.3.6 安装包
07-19
文件名: hadoop-3.3.6.tar.gz 这是 Hadoop 3.3.6 版本的安装包(即二进制版,不是源码)，文件格式为 tar.gz,解压后直接使用. Hadoop 是一个由 Apache 基金会所开发的分布式系统基础架构，用户可以在不了解分布式底层...
hadoop-3.3.4 版本（最新版）
12-14
Apache Hadoop （hadoop-3.3.4.tar.gz）项目为可靠、可扩展的分布式计算开发开源软件。官网下载速度非常缓慢，因此将hadoop-3.3.4 版本放在这里，欢迎大家来下载使用！ Hadoop 架构是一个开源的、基于 Java 的编程...
virtualbox 网络配置
Claroja
03-14 2002
1.在全局配置里设定网络基本配置 默认网关是10.0.2.0 2.给虚拟机单独设置
hadoop 集群常见问题
Claroja
03-20 1013
1 Invalid resource request, requested memory < 0, or requested memory > max configured, requestedMemory=1536, maxMemory=1024 conf.set("yarn.scheduler.maximum-allocation-mb","200"); conf.set("y...
HIVE
Claroja
10-13 980
目标不同，设计需求就不同 业务仓库需要考虑三范式 数据仓库不用三范式，用宽表，以空间换时间星型模型 把所有事实放在一个表里面，关联维度力度表hive是局域hadoop的一个数据仓库，将结构化的数据文件映射为一张数据表，提供SQL查询功能，封装了mapreduce HIVE将SQL语言编译为MapReduce，然后放在YARN里面执行 MySQL里面存储的是HIVE的配置信息，比如字段之间
hadoop linux 集群提交任务
Claroja
03-20 798
jobcommit package WordCount; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.Path; import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.Text; import org.apach...
Hadoop权威指南
"Hadoop.The.Definitive.Guide" 《Hadoop：权威指南》是由Tom White编写的关于Hadoop技术的详细教程。这本书是Hadoop学习者的必备参考书，旨在为读者提供全面深入的Hadoop知识。书中涵盖了Hadoop生态系统的核心组件...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值