Hive On Spark报错：Failed to execute spark task, org.apache.hadoop.hive.ql.metadata.HiveException

最新推荐文章于 2023-04-04 15:59:25 发布

陈某1987

最新推荐文章于 2023-04-04 15:59:25 发布

阅读量3.7w

点赞数 4

本文链接：https://blog.csdn.net/pucao_cug/article/details/72783688

版权

在Hive On Spark环境下执行SQL时遇到""Failed to execute spark task, with exception 'org.apache.hadoop.hive.ql.metadata.HiveException(Failed to create sparkclient.)'""的问题。报错通常是由于Hive和Spark版本不兼容或配置错误导致无法连接Spark集群。解决方法包括检查Hive和Spark版本支持情况，确认`spark.master`配置是否正确（例如设置为`spark://Ip地址或机器名称:端口`或`yarn-client`）。如果配置无误但问题依然存在，可以使用特定命令在执行`select count`时输出详细日志以辅助排查问题。" 48213633,4795659,二叉树面试题大全：遍历、深度、平衡与操作,"['数据结构', '二叉树', '面试题', '二叉搜索树']

摘要由CSDN通过智能技术生成

Hive On Spark环境中执行select count语句时候报错：

Failedto execute spark task, with exception'org.apache.hadoop.hive.ql.metadata.HiveException(Failed to create sparkclient.)

如图：

报错完整信息是：

hive> select count(*) from t_hello;
Query ID= root_20170526110421_068eb89e-d3e2-4f92-889f-ab971b733e9b
Totaljobs = 1
LaunchingJob 1 out of 1
In orderto cha