大数据环境报错问题
文章平均质量分 64
zzp28218
这个作者很懒,什么都没留下…
展开
-
使用yum下载插件出现:Could not retrieve mirrorlist http://mirrorlist.centos.org/?rel 14: curl#6 - “Could not
yum下载软件出现错误提示Loaded plugins: fastestmirrorCould not retrieve mirrorlist http://mirrorlist.centos.org/?release14: curl#6 - "Could not resolve host: mirrorlist.centos.org; Unknow原创 2022-12-17 16:02:33 · 1371 阅读 · 1 评论 -
Centos7使用scala从外部MySQL数据库加载数据集出现ERROR TaskSetManager: Task 0 in stage 0.0 failed 4 times; aborting..
环境配置:使用的是Centos7.4版本的虚拟机,然后hive配置的是远程模式(master节点当作客户端,slave节点当作hive端),slave2节点安装的是MySQL数据库;spark版本为1.6.3,scala版本为2.10.6。目的:在spark-shell中使用scala加载外部MySQL数据库中的菜品数据,然后做数据分析工作。出现的问题:在master节点上访问MySQL数据库中的数据库的时候出现问题。ERROR TaskSetManager: Task 0 in stage 0.0原创 2022-04-10 10:48:57 · 4541 阅读 · 0 评论 -
Windows系统下eclipse连接Linux系统hadoop集群提交MapReduce程序报错合集及解决方案
前言:作者使用的Hadoop版本是2.6.0,在Windows系统下使用eclipse编写MapReduce程序提交到集群运行遇到一些报错问题。现针对几种报错给出自己的解决方法。错误一:2021-11-29 16:28:48,544 ERROR [org.apache.hadoop.util.Shell] - Failed to locate the winutils binary in the hadoop binary pathjava.io.IOException: Could not loc原创 2021-12-01 15:36:45 · 3280 阅读 · 0 评论 -
hive-1.1.0版本远程模式执行sql语句出现错误
错误1:Job Submission failed with exception 'java.io.FileNotFoundException(File does not exist: hdfs://master:9000/usr/local/src/hive/apache-hive-1.1.0-bin/lib/accumulo-fate-1.6.0.jar)'FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exe原创 2021-11-11 21:53:59 · 1886 阅读 · 2 评论