Hadoop
凌凌岛
这个作者很懒,什么都没留下…
展开
-
Hadoop学习笔记之集群安装
操作系统Hadoop版本节点个数Cent OS 7hadoop-2.7.72(master,slave)文章目录1 Linux系统设置1.1 同步时间1.1.1 查看时间1.1.2 同步网络时间1.2 配置主机名1.2.1 配置master1.2.2 配置slave1.3 关闭防火墙1.3.1 查看防火墙1.3.2 关闭防火墙1.4 配置网络1.4.1 master...原创 2019-03-21 13:21:49 · 121 阅读 · 0 评论 -
Hadoop学习笔记之Hive安装
Hadoop学习笔记之Hive安装1 安装配置MySQL1.1 净化MySQL环境1.1.1 检查是否安装1.1.1 卸载包1.1.2 删除MySQL相应文件1.2 安装MySQL1.2.1 配置MySQL yum源1.2.2 安装MySQL1.2.3 修改root密码2 安装Hive2.1 创建用户和数据库2.1.1 创建hadoop用户2.1.2 创建hive数据库2.2 安装并配置Hive2...原创 2019-03-21 09:25:49 · 167 阅读 · 0 评论 -
Hadoop学习笔记之Hive基本操作
文章目录1 在Hive中的命令1.1 执行shell命令1.2 执行hdfs命令1.3 DDL操作1.3.1 对数据库的操作1.3.2 对表的操作1.4 DML操作1.4.1 加载数据1.4.2 导出数据2 Hive中的特殊数据结构2.1 动态分区表2.1.1 创建预备表并导入数据2.1.2 设置分区模式2.1.3 创建包含动态分区的分区表并加载数据2.1.4 查看数据2.1.5 查看分区2.2 ...原创 2019-03-21 17:52:53 · 670 阅读 · 0 评论 -
Hadoop学习笔记之Hive高级操作
文章目录1 连接1.1 数据准备1.2 Join操作1.2.1 内连接JOIN1.2.2 外连接1.2.3 右外连接1.2.4 全外连接1.3 左半连接2 数据类型2.1 原子数据类型2.2 复杂数据类型2.3 复杂数据类型实例2.3.1 数组(ARRAY)2.3.2 映射2.3.3 结构体3 查询4 函数4.1 内置函数4.1.1 查看内置函数4.1.2 显示函数的详细信息4.1.3 显示函数的...原创 2019-03-22 18:21:24 · 223 阅读 · 0 评论 -
Hadoop学习笔记之HA集群安装部署
文章目录1 运行环境1.1 软件环境1.2 IP与hostname设置2 安装准备2.1 准备虚拟机修改主机名2.2 关闭防火墙2.3 修改hosts列表2.4 配置时钟同步2.5 配置免秘钥登录2.6 安装jdk3 安装其他组件3.1 安装zookeeper3.2 安装hadoop3.2.1 HDFS3.2.2 YARN3.2.3 分发配置文件3.2.4 启动HDFS3.2.5 验证是否成功3....原创 2019-03-29 18:56:32 · 197 阅读 · 0 评论