![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
大数据之路
文章平均质量分 70
大数据相关的学习笔记内容
DeepOps
MAKE YOUR LIFE A STORY WORTH TELLING
展开
-
DeepOps的hadoop小笔记-Hadoop 与 Java JDK 的版本选择
详细内容参考网址: https://cwiki.apache.org/confluence/display/HADOOP/Hadoop+Java+Versions Apache Hadoop 3.3 and upper supports Java 8 and Java 11 (runtime only) Please compile Hadoop with Java 8. Compiling Hadoop with Java 11 is not supported: HADOOP-16795 - Ja原创 2021-03-08 17:21:45 · 314 阅读 · 0 评论 -
DeepOps的hadoop小笔记-HIVE安装ubuntu+virtualbox
00 前期准备 1、已部署好hadoop集群 2、已部署java环境 3、已经安装好mysql 01 下载hive安装文件 https://hive.apache.org/downloads.html 02 修改配置文件 hive-env.sh.template名称为hive-env.sh,一些hive的环境变量内容可以在里面设置。 系统用户环境变量中增加: export HADOOP_HOME=<hadoop-install-dir> export HIVE_HOME=<hive-ins原创 2021-02-26 09:30:12 · 189 阅读 · 0 评论 -
DeepOps的hadoop小笔记-hadoop集群搭建ubuntu+virtualbox
00 前期准备 1、已部署hadoop 2、已部署java环境 01 主要介绍 hdfs namenode nn datanode dn secondary namenode 2nn yarn ResourceManager rm NodeManager nm ApplicationMaster AM Container MapReduce Map Reduce 02 各项环境信息 服务器情况 服务器名称 服务器ip HDFS服务 YARN 服务 说明 03 创建虚拟机 设置s原创 2021-02-16 16:11:26 · 217 阅读 · 0 评论 -
DeepOps的hadoop小笔记-ubuntu18.4 LTS 环境下搭建 hadoop
中文官方参考文档链接: http://hadoop.apache.org/docs/r1.0.4/cn/quickstart.html 检查环境变量与依赖 下载安装包 下载相应的软件 解压安装包 解压软件并建立相应目录 4 ...原创 2018-12-21 15:52:56 · 192 阅读 · 0 评论 -
ubuntu18.4 LTS 环境下搭建 hive
官方参考文档GettingStarted https://cwiki.apache.org/confluence/display/Hive/GettingStarted 1.依赖与版本 java: Hive 1.2版本及以上 jdk1.7 或更高 Hive 0.14~1.1 使用jdk1.6 我机器jdk现在是1.9 hadoop: 推荐hadoop 2.x hive2.0 以上版本不支持 h...原创 2018-12-21 16:22:32 · 247 阅读 · 0 评论