Hadoop
文章平均质量分 87
Hadoop
瑟 王
失业中
展开
-
Ubuntu安装MySQL8.0 允许远程访问
Ubuntu安装MySQL8.0 允许远程访问1 安装MySQL1.1 下载并安装DEB Package2 设置允许远程访问 1 安装MySQL 1.1 下载并安装DEB Package https://dev.mysql.com/downloads/repo/apt/ 第一步:安装deb sudo dpkg -i mysql-apt-config_0.8.11-1_all.deb 第二步:...原创 2019-01-08 16:00:17 · 8485 阅读 · 3 评论 -
Hive入门
Hive入门安装和配置必要条件安装稳定版HiveMySQL作为Hive元数据库运行Hive启动Hadoop启动Hive CLI查询所有数据库查询所有表创建Hive表向表插入数据查询Hive表的数据 安装和配置 必要条件 Java1.7(提示:Hive1.2之后的版本需要Java1.7+,强烈建议迁移至Java1.8) Hadoop2.x(优先),1.x(Hive2.0.0之后不支持)这里默认你已...原创 2019-08-16 18:35:38 · 441 阅读 · 0 评论 -
Hadoop学习笔记(一) Ubuntu安装JDK和ssh
1. Hadoop的必要软件环境 Java开发环境JDK ssh(安全外壳协议) 1.1 Ubuntu下安装JDK 系统环境:ubuntu-18.04.1 JDK版本:1.8 1.1.1 从oracle官方下载jdk的包到本机 1.1.2 在当前目录下打开终端,输入命令解压包 #输入jdk,按Tab键自动补全文件名 $ tar -zxvf jdk-8u181-linux...原创 2018-09-11 13:53:59 · 785 阅读 · 0 评论 -
Hadoop学习笔记(二) 安装Hadoop单节点集群
1. 下载并解压Hadoop 1.1 下载Hadoop 从Hadoop官网上下载,他会推荐我们从清华的镜像下载,这里我选择2.9.1版本 1.2 解压Hadoop包 $ tar -zxvf hadoop-2.9.1.tar.gz 1.3 将解压的文件夹重命名为Hadoop,然后拷贝到/usr/local下 2. 设置Hadoop环境变量 2.1 打开.b...原创 2018-09-14 14:49:08 · 544 阅读 · 0 评论 -
Hadoop学习笔记(三) Ubuntu搭建Hadoop分布式集群
安装Hadoop分布式集群运行环境配置目标搭建Hadoop分布式集群步骤1 搭建master1.1 安装JDK1.2 安装SSH1.3 安装Hadoop2 搭建node2.1 从master克隆出node2.2 设置master和node之间SSH通信2.2.1 在master上修改hostsname2.2.2 在node1和node2上修改hostsname2.2.3 修改host文件2.2...原创 2018-09-21 18:14:32 · 1426 阅读 · 1 评论 -
Hadoop学习笔记(四) Ubuntu安装Scala
1. 下载并解压Scala 1.1 下载Scala2.11.8 下载地址: https://www.scala-lang.org/download/2.11.8.html 选择Unix版本的下载 1.2 解压Scala包 $ sudo tar xvf scala-2.11.8.tgz 2. 将Scala移动到/usr/lib/scala 2.1 新建scala目录 winter@master:...原创 2018-09-27 17:54:50 · 208 阅读 · 0 评论 -
Hadoop学习笔记(五) Linux常用命令总结
Linux常用命令原创 2018-11-13 16:54:42 · 408 阅读 · 2 评论 -
Hadoop学习笔记(六) HDFS常用命令总结
HDFS常用命令总结 hadoop fs -ls hadoop fs -ls / hadoop fs -ls -R / hadoop fs -mkdir /user hadoop fs -mkdir /user/winter2 hadoo fs -mkdir /a/b/c hadoop fs -copyFromLocal test3.txt books/ hadoop fs -copyFromLo...原创 2018-11-15 17:34:42 · 792 阅读 · 0 评论 -
CentOS搭建Hive(一) 搭建Hadoop(单机版)
搭建Hadoop单机版1. 安装Java2. 解压Hadoop3. 修改Hadoop配置3.1 hadoop-env.sh3.2 core-site.xml3.3 hdfs-site.xml4. 启动HDFS5. 配置yarn模式5.1 mapred-site.xml5.2 yarn-site.xml5.3 启动yarn 1. 安装Java 将Java包解压到/usr/lib下,并重命名为jkd1...原创 2019-02-18 14:43:17 · 1182 阅读 · 0 评论