使用 Hive QL 操作数据

最新推荐文章于 2024-07-19 00:08:02 发布
最新推荐文章于 2024-07-19 00:08:02 发布
阅读量1.3k 收藏
点赞数 1
分类专栏： 操作系统 Ubuntu 大数据 文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/aiaias/article/details/121594457
版权
本文在Linux环境下，通过VMWare和Ubuntu系统，利用Java JDK8、Hadoop 2.7.3和Hive 2.1.1进行数据操作实验。详细步骤包括创建数据库testdb，导入students.txt文件到student表中，以及查询学生Java课程最高成绩和姓名含ang的学生信息。
摘要由CSDN通过智能技术生成

文章目录

准备条件

  1. 虚拟机 VMWare
  2. Linux 系统 Ubuntu
  3. Java JDK8
  4. Hadoop 2.7.3
  5. Hive 2.1.1

实验步骤

步骤1

启动 HDFS ，注意 Hive 是运行在 HDFS 之上的，必须安装好和
启动 HDFS 才能使用 Hive
启动 Hive
进入 Hive 命令行（CLI）
cd ~/hive-2.1.1/bin
hive

在这里插入图片描述

最低0.47元/天 解锁文章
Yet again
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Hive_QL详解1
08-04
总结，Hive QL的高效使用依赖于理解Hadoop框架的特性和限制，以及对Hive数据模型和操作的理解。通过合理的数据分区、优化Job数量、处理数据倾斜、调整数据类型和操作，可以显著提升Hive查询的效率和性能。在实际应用...
hive数据表-小文件合并代码（java）
08-08
在大数据处理领域，Hive是广泛使用的数据仓库工具，它允许我们对大规模数据进行SQL查询。然而，当Hive表中包含大量小文件时，这可能会导致性能问题，因为每个小文件都会在MapReduce任务中生成一个Map任务，过多的小...
hive on spark mr 数据开发常见问题解决
11-20
如果看到`FAILED: Execution Error, return code 3 from org.apache.hadoop.hive.ql.exec.mr.MapredLocalTask`，这可能是因为MapJoin操作导致的问题。为避免这类错误，可以尝试设置`hive.auto.convert.join = false...
hive Hcatalog streaming API使用
01-20
Hive Streaming API的使用通常涉及编写Java代码来处理数据的读取和写入。这里有两种常见的写入方式：`DelimitedInputWriter`和`StrictJsonWriter`。`DelimitedInputWriter`用于处理以特定分隔符（如逗号）分隔的数据...
hive实验报告.docx
03-14
通过这次实验，学生能够深入理解Hive作为数据仓库工具的作用，熟悉其基本操作和使用场景，同时也掌握了自定义函数的开发流程，这对于进一步学习大数据处理和分析具有重要意义。在实际工作中，Hive的性能优化和与其他...
接着探索Linux的世界 -- 基本指令（文件查看、时间相关、打包压缩等等）
weixin_73359101的博客
07-14 1685
命令输出到某个指定文件中，而不是输出到终端屏幕或终端窗口。我们从键盘输入什么，cat命令就打印什么。命令 + >> + 目标文件名。： 将命令的结果写入目标文件中；这两条指令的作用等价。
linux的学习（四）：磁盘，进程，定时，软件包的相关命令
weixin_45037073的博客
07-14 1145
关于磁盘管理，进程管理，定时任务，软件包管理的命令的使用。
linux dev shm扩容
hello__bug的博客
07-14 263
ctrl + x 保存。
Linux 权限
includemainprinf的博客
07-18 513
在Linux操作系统中，权限管理是一个至关重要的概念，它确保了系统的安全性和稳定性。同时可以在工作中，设置对象的权限，就算我们很多人使用一台服务器，我们也可以让别人看不到我们文件的内容，或者让别人无法对自己的文件进行操作！
文件在Linux下为binary格式在Windows下为utf-8格式
qq_38220334的博客
07-17 314
想着是不是之前遇到的问题，有可能是文件中含有特殊字符，然后用vim命令来编辑这个文件，发现，还真是含有一个特殊字符，然后将它删除掉，文件就变成utf-8格式的文件了。在Windows下和Mac下都是没有问题的，在华为云服务器上也是没问题的（操作系统不是centos），但是在自己搭建的Linux服务器（centos）上是有问题的。用shell或者Python脚本去将这个文件转为utf-8格式的，但是都失败了。
【Linux】深入探索`cp`命令：文件复制的全面指南
lph159的博客
07-18 306
cp命令用于复制文件或目录的内容。cp [选项] 源文件 目标文件或目录使用cp命令可以在文件系统中创建新的副本，无论是单个文件还是整个目录树。接下来我们将详细介绍cp命令的各个选项及其用法。
Linux HOOK机制与Netfilter HOOK
Flashing-C的博客
07-18 504
在计算机中基本所有的软件程序都可以通过hook方式进行行为拦截，hook方式就是改变原始的执行流。 Linux常见的HOOK方式：1、修改函数指针。2、用户态动态库拦截。①利用环境变量LD_PRELOAD和预装载机制进行HOOK；②利用函数ptrace可实现对已运行的程序进行HOOK；3、内核态系统调用拦截。通过修改全局系统调用表，对系统调用进行劫持；4、堆栈式文件系统拦截。5、LSM。6、Netfilter HOOK。
Linux高级IO
Wang3260584290的博客
07-14 854
Linux的高级IO
Linux——多路复用之select
最新发布
kkbca的博客
07-19 766
在前面，我们学习了五种IO模型，对IO有了基本的认识，知道了select效率很高，可以等待多个文件描述符，那他是如何等待的呢？我们又该如何使用呢？
Linux笔记之shell终端命令后显示指定行数的grep和head
小勇博客
07-14 562
在Linux中，grep命令和head命令常用于文本处理。grep命令用于搜索文本中的特定模式，而head命令用于显示文件的开头部分。了解如何结合这两个命令（例如使用管道）可以帮助你更高效地处理和查看文本数据。grep -A选项用于在匹配到的行之后显示指定数量的行。例如，将显示匹配到的行及其后面的三行。选项用于显示文件的前n行。例如，将显示file.txt的前五行。
Linux入门以及Linux文件编程学习
2302_80169672的博客
07-18 700
size_t size 参数 : 读取的 基本单元 字节大小 , 单位是字节 , 一般是 buffer 缓冲的单位大小;Vi+文件名 创建或者打开一个文件，进入默认命令行模式，此时你不可以输入代码，只有在输入模式下你才可以输入你的代码，按下字母【i】即可进入输入模式你就可以随便输入你想输入的内容了，按下【ESC】退出输入模式进入命令行模式，在命令行模式下，按下“：”冒号，在输入wq，即可保存内容退出文件！size_t size : 要写出数据的 基本单元 的字节大小 , 写出单位的大小;
Linux exec 命令和Python exec 函数 区别
u010674101的专栏
07-15 520
Linux 中的exec和 Python 中的exec有不同的设计目的，分别用于进程管理和动态代码执行。它们各自的设计都满足了特定的需求，并提供了相应的灵活性和功能。在使用它们时，需要根据具体场景和需求，权衡利弊，确保安全和效率。
# Redis 入门到精通（四）-- linux 环境安装 redis
段子手168的博客
07-15 382
Redis 入门到精通 # Redis 入门到精通（四）-- linux 环境安装 redis 047-linux环境安装redis-基于Linux安装redis 048-linux环境安装redis-指定端口启动服务 049-linux环境安装redis-指定配置文件启动服务 050-linux环境安装redis-配置文件启动目录管理
Linux---PXE高效装机
lwforever_lw的博客
07-14 924
PXE 的全称是 preboot execute environment它其实是Intel在很久以前提出来的一项用于通过网络来引 导系统的标准。允许客户机通过网络从远程服务器上下载引导镜像，并加载安装文件或者整个操作系统。PXE 是通过网卡引导启动。搭建PXE，也需要满足谢列条件：实现的硬件条件（客户机网卡支持PXE协议、主板支持网络引导、集成BOOTROM芯片）；BIOS支持；网卡支持（现在基本都已支持）；需要在bios中开启开关，服务器一般没打开（bmc界面里打开）；
Apache Hive入门指南：数据挖掘工程师必备
"《Apache Hive基础教程》是一本专注于Hive工具使用的英文书籍，专为初入大数据领域，尤其是想要学习Hive数据挖掘技术的工程师设计。本书由www.it-ebooks.info提供，内容涵盖了Hadoop生态系统概述、Hive环境的安装与...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Yet again

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值