大数据
文章平均质量分 97
望山。
Java开发行业中的人类高质量学习人员
展开
-
Hive以及Hive安装部署
文章目录1.Hive简介1.1什么是Hive1.2为什么使用Hive1.3Hive的特点1.4Hive架构图1.5Hive与Hadoop的关系1.6Hive与传统数据库对比2.HIVE的安装部署1.derby版hive直接使用1、解压hive2.修改目录名称3.初始化元数据库4.启动5.创建数据库6.创建表7.插入数据8.可能遇到的问题9.Hive启动报错Safe mode2.基于mysql管理元数据版hive1、解压hive2.修改目录名称3.检测服务器mysql数据库4.配置mysql允许外网访问5.退原创 2021-11-15 10:52:52 · 1880 阅读 · 0 评论 -
HDFS、MapReduce、Yarn学习
文章目录1.HDFS入门介绍1.1 HDFS 介绍1.2 HDFS的特性1.2.1 master/slave 架构1.2.2 分块存储1.2.3 名字空间(NameSpace)1.2.4 namenode 元数据管理1.2.5 Datanode 数据存储1.2.6 副本机制1.2.7 一次写入,多次读出2.分布式文件系统HDFS1.HDFS的来源2.HDFS的架构图之基础架构2.1 master/slave 架构2.2 名字空间(NameSpace)2.3 文件操作2.4副本机制2.5心跳机制2.6 一次写原创 2021-11-13 20:29:48 · 1866 阅读 · 0 评论 -
大数据+Hadoop集群学习
文章目录1.课前资料2.课程整体介绍3.大数据介绍什么是大数据?为什么要学习大数据?大数据相关技术海量数据存储海量数据清洗海量数据处理4.集群环境准备4.1准备虚拟机4.2修改为静态IP4.2.1配置文件4.2.2配置文件内容4.2.3重启网络4.2.4查看IP4.3mobaxTerm的使用4.4关闭防火墙4.5修改主机名4.6修改hosts文件4.7三台机器重启4.8设置免密登录4.8.1三台机器生成公钥与私钥4.8.2拷贝公钥到同一台机器4.8.3复制第一台机器的认证到其他机器4.8.4测试4.9三台机原创 2021-11-13 18:34:08 · 497 阅读 · 0 评论