windows下hive环境搭建

最新推荐文章于 2023-10-17 14:36:20 发布
VIP文章 最新推荐文章于 2023-10-17 14:36:20 发布
阅读量4.5k 收藏 11
点赞数 1
分类专栏： hive 大数据 文章标签： hive 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/caojian107/article/details/105334439
版权

先说一句，不建议在windows下搭建hive，感觉没必要，坑比较多，让我有了租云服务器的冲动！

 

一、准备工作

 

之前我们已经安装好了hadoop，根据网上的教程，还需要一个hadoop.dll文件需要扔到hadoop的bin目录，git上可以找到。

 

 

 

 

hadoop可以正常启动。

 

二、安装hive

 

因为hadoop是2.7.7版本，我选了2.3.6版本的hive。因为2.3.6的bin目录下缺少一些必须的.cmd文件，国内镜像又找不到有那些.cmd文件的低版本，我又去官网下了2.1.1，下了4小时左右，坑！

 

<
最低0.47元/天 解锁文章
badbeat
关注
  • 1
    点赞
  • 踩
  • 11
    收藏
    觉得还不错? 一键收藏
  • 5
    评论
专栏目录
hive环境搭建
01-20
九、hive环境搭建 1. bin/hdfs dfs -mkdir /tmp bin/hdfs dfs -mkdir -p /user/hive/warehouse bin/hdfs dfs -chmod g+w /tmp bin/hdfs dfs -chmod g+w /user/hive/warehouse 2.配置hive-env.sh HADOOP_HOME=/opt/cdh/hadoop-2.6.0-cdh5.14.2 export HIVE_CONF_DIR=/opt/cdh/hive-1.1.0-cdh5.14.2/conf 3.配置hive-site.xml,
Windows10系统下Hadoop和Hive开发环境搭建填坑指南
qq_15821487的博客
05-07 611
Windows10系统下Hadoop和Hive开发环境搭建填坑指南 笔者目前需要搭建数据平台，发现了Windows系统下，Hadoop和Hive等组件的安装和运行存在大量的坑，而本着有坑必填的目标，笔者还是花了几个晚上的下班时候在多个互联网参考资料的帮助下完成了Windows10系统下Hadoop和Hive开发环境的搭建。这篇文章记录了整个搭建过程中的具体步骤、遇到的问题和对应的解决方案。 ...
[Python黑帽] 一.获取Windows主机信息、注册表、U盘历史痕迹和回收站文件
杨秀璋的专栏
09-06 1万+
Python黑帽第一篇文章将分享获取Windows主机信息，利用注册表获取主机名及USB历史痕迹、回收站文件等，这些知识广泛应用于电子取证、Web渗透和攻击溯源领域，其中USB获取是亮点。希望这篇基础文章对您有所帮助，更希望大家提高安全意识，学会相关防范，也欢迎大家讨论，真心想把自己近十年的所学所做所感分享出来，与大家一起进步。
大数据文档需求面试题
yiyiqi123的博客
05-12 6934
索引 问题 答案 配图 备注 A1 azkaban使用流程? 类似工具(oozie乌贼) 创建之前我们先了解下之间的关系，一个工程包含一个或多个flows，一个flow包含多个job。job是你想在azkaban中运行的一个进程， 可以是简单的linux命令，可是java程序，也可以是复杂的shell脚本，当然，如果你安装相关插件，也可以运行插件。一个job可以依赖 于另一个job，这种多个job和它们的依赖组成的图表叫做flow 1.Command 类型单一 job 示例 A.首先创建一个工程(proje
Hadoop大数据技术教程（ wukong-1.0v）
悟空非空也
09-22 4085
1 初识Hadoop 什么是大数据 随着近几年计算机技术和互联网的发展，“大数据”这个词被提及的越来越频繁。与此同时，大数据的快速发展也在无时无刻影响着我们的生活。例如，医疗方面，大数据能够帮助医生预测疾病；电商方面，大数据能够向顾客个性化推荐商品；交通方面，大数据会帮助人们选择最佳出行方案。 Hadoop作为一个能够对大量数据进行分布式处理的软件框架，用户可以利用Hadoop生态体系开发和处理海量数据。由于Hadoop有可靠及高效的处理性能，使得它逐渐成为分析大数据的领先平台。 高速发展的信息时代，新一轮
Windows下安装Hive
weixin_44179938的博客
06-03 2915
hive官网下载地址：https://archive.apache.org/dist/hive/hadoop官网下载地址：https://archive.apache.org/dist/hadoop/common/以hive-2.3.5为例1、下载apache-hive-2.3.5-src.tar.gz2、解压后，查看apache-hive-2.3.5-src/pom.xml文件​ 部分内容如下(line 141: 2.7.2
Windows下安装Hive（包安装成功）
tttzzzqqq2018的博客
07-31 4993
Hive 的Hive_x.x.x_bin.tar.gz 高版本在windows 环境中缺少 Hive的执行文件和运行程序。配置文件目录（%HIVE_HOME%\conf）有4个默认的配置文件模板拷贝成新的文件名。可以发现，自动连接MySQL去创建schema hive，并执行脚本。可以通过访问namenode和HDFS的Web UI界面（以及resourcemanager的页面（先在Hive安装目录下建立。根据自己的Hive安装路径（根据自己的Hive安装路径（请严格按照版本来安装。在Hadoop管理台（
【傻瓜式教程】Windows下安装Hive MySQL版【附安装Hadoop教程】全网最详细的图文教程
w0714的博客
08-28 2万+
目录一定要先看的前言1 安装Hadoop1.1 下载并解压资源1.2 配置系统变量和环境变量1.2.1 系统变量1.2.2 环境变量1.2.3测试1.3 复制文件1.4 修改配置文件1.4.1 创建目录1.4.2 修改5个文件1.5 格式化HDFS1.6 开启四个进程1.7 测试Hadoop DFS2 安装Hive MySQL版本2.1 下载并解压资源2.2 配置系统变量和环境变量2.2.1 系统变量2.2.2 环境变量2.3 Hive config配置2.4 创建目录2.5 修改 hive-env.sh2
大数据Hadoop之——部署hadoop+hive+Mysql环境（window11）
qq_41946216的博客
10-17 4253
win环境下大数据Hadoop的部署hadoop+hive环境
windows下pyspark访问hive所需的环境搭建
热门推荐
小小明-代码实体的专栏
05-03 2万+
文章目录windows下pyspark访问hive所需的环境前提搭建hadoop2.7.2修改hadoop配置格式化hdfs测试搭建spark-2.4.5解压hive-2.1.0创建hive元数据库的schema测试spark-sql测试hivejupyter中使用pyspark使用pyspark访问本地hive测试pyspark 前言 学习大数据最困难的就是入门时的环境搭建，虽然那是对理解原理...
windows下安装hive2.3.3缺少的可执行文件
08-07
windows10下安装hive2.3.3的时候，无法执行hive命令，原因是官方下载文件中缺少可执行文件（好多个cmd文件），安装的时候无法执行成功。下载后，解压替换hive的bin目录即可执行成功。
hive介绍和hive环境搭建
11-13
hive介绍和hive环境搭建。。一、 安装mysql 1. 使用root用户: su root 2. 安装 yum install mysql yum install mysql-server yum install mysql-devel（可选） 3. 修改配置信息，添加: vim /etc/my.cnf ...
Hive的环境搭建配置文件
最新发布
04-07
Hive的环境搭建配置文件
hive环境搭建和建表加载数据
03-15
Hive环境搭建,创建表,加载数据到hive表,并处理数据，hive sql提交作业
windows下hive的可执行文件
10-04
免费的，我下载了其他人的也不能用，这个好像也不太行，需要的可以拿去试试
一个hive遇到的问题（两表关联，两表中关联字段唯一，关联结果表中不唯一）
曹健的博客
05-22 5715
记录一个hive中遇到的很有意思的问题，首先我建了两张临时表，最终要把两张表关联起来的时候，发现：两张表中的关联字段都是唯一的，关联之后关联字段竟然不唯一了！关联方法用的left join。检验sql如下： SELECT project_id, COUNT(1) AS num FROM tmp.remote_monitor_5 GROUP BY project_id HAVING num &gt...
hive报错：Illegal repetition near index 1
曹健的博客
11-12 3345
for((i=1;i<=24;i=i+1)) do day=`date -d "${day1} -$i day" +%Y%m%d` echo "execute date================================="${day} hive -e " set hive.merge.mapfiles = true; set hive.merge.mapredfi...
hive数据写入ES报错
曹健的博客
07-02 2727
使用插件，将hive中的数据存入ES，在向映射表中更新数据的时候报错： FAILED: Execution Error, return code 2 from org.apache.hadoop.hive.ql.exec.mr.MapRedTask MapReduce Jobs Launched: Stage-Stage-3: Map: 1 Reduce: 1 Cumulative CPU: 4...
hive3.1.3环境搭建具体步骤
07-08
当搭建Hive 3.1.3环境时，以下是一些基本的步骤： 1. 安装Java：确保你的机器上已经安装了Java。Hive 3.1.3需要Java 8或更高版本。 2. 下载Hive：从Apache Hive的官方网站...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值