Hive执行复杂查询语句卡死在kill command

在使用hive执行查询语句的时候,出现了多次下面图中卡死在kill command的情况:

 

解决办法

①查看日志发现并没有报错信息,首先考虑到可能是yarn的运行内存不够导致出现的卡顿现象。

所以我进入到:/home/modules/hadoop-2.8.3/etc/hadoop目录找到yarn-env.sh文件,通过vim yarn-env.sh打开文件,修改内存。

修改完内存后,重新运行hive发现依然会出现卡死的情况。

②然后又尝试通过kill -9 杀死hadoop组件之外的进程,重新运行hive执行查询命令,发现竟然还是会卡死。

③最后,通过

stop-dfs.sh&&stop-yarn.sh  #关闭Hadoop服务

把Hadoop为关了,又通过

start-dfs.sh;start-yarn.sh   #开启Hadoop服务

重新开启Hadoop服务,重新运行hive,执行查询命令,终于好了!

  • 2
    点赞
  • 5
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
### 回答1: 在Linux环境中,可以使用Hive CLI来执行SQL语句,具体步骤如下:1. 首先,连接Hive服务器,使用命令:$Hive --service hiveserver。2. 然后,使用命令:$Hive -e 'SQL语句'来执行SQL语句。3. 最后,使用命令:$Hive -f '脚本文件'来执行脚本文件中的SQL语句。 ### 回答2: 在Linux环境下,我们可以通过Hive执行SQL语句。首先,我们需要确保已经在Linux系统上安装了HadoopHive。 步骤如下: 1. 打开终端,在Linux命令行中输入`hive`命令,启动Hive Shell。 2. 在Hive Shell中,我们可以执行各种Hive命令和SQL语句。首先,我们需要创建数据库(如果还不存在)。使用`CREATE DATABASE`语句创建数据库,例如`CREATE DATABASE mydatabase;`。 3. 接下来,我们需要切换到刚创建的数据库。使用`USE`命令切换到指定数据库,例如`USE mydatabase;`。 4. 现在,我们可以执行任何SQL语句了。例如,我们可以使用`CREATE TABLE`语句创建表,使用`SELECT`语句查询数据,使用`INSERT INTO`语句插入数据等等。示例:`CREATE TABLE mytable (id INT, name STRING);`、`SELECT * FROM mytable;`、`INSERT INTO mytable VALUES (1, 'John');`。 5. 若需要退出Hive Shell,可以使用`QUIT`或`EXIT`命令。 另外,我们还可以通过将SQL语句保存在一个`.sql`文件中,然后在Hive Shell中执行该文件来批量执行SQL语句。使用`SOURCE`命令,例如`SOURCE /path/to/script.sql;`。 总之,在Linux环境中,可以通过Hive Shell来执行SQL语句,同时也可以将SQL语句保存在文件中进行批量执行。这样可以更灵活和高效地进行数据查询和处理。 ### 回答3: 要在Linux环境中通过Hive执行SQL语句,可以按照以下步骤进行操作: 1. 首先,确保已经在Linux环境中安装了Hive。可以通过在终端中输入命令`hive -version`验证是否安装成功。 2. 打开终端,使用命令`hive`来启动Hive的命令行界面。 3. 在Hive命令行界面中,可以直接输入SQL语句执行。例如,要执行创建表的SQL语句,可以输入类似以下的命令: ``` CREATE TABLE my_table ( id INT, name STRING ); ``` 4. 想要执行一个完整的SQL脚本文件,可以使用以下命令: ``` hive -f /path/to/sql_script.sql ``` 其中,`/path/to/sql_script.sql`是你的SQL脚本文件的路径。 5. 另外,还可以通过Hive命令行界面执行HiveQL查询。例如,要查询某个表的数据,可以使用以下命令: ``` SELECT * FROM my_table; ``` 6. 执行完SQL语句后,Hive会返回相应的结果或者执行的状态信息。 7. 如果需要在脚本中使用变量,可以使用Hive的参数替换。例如,使用`${var}`的形式引用参数,并在执行脚本时使用`-d`选项指定参数的值。例如: ``` SET my_var=value; SELECT * FROM ${hiveconf:my_var}; ``` 总之,通过以上步骤,在Linux环境中可以很方便地使用Hive执行SQL语句。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值