CDH-YARN问题（异端连接问题）

最新推荐文章于 2022-10-11 19:40:21 发布
最新推荐文章于 2022-10-11 19:40:21 发布
阅读量252 收藏
点赞数
文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45392855/article/details/120670227
版权

在一次CDH环境升级过后（CDH5.13升级到CDH6.3.2版本）测试各组件是否可以正常使用时，发现发现YARN中的mapreduce任务执行失败，起初以为是升级之后的配置文件没有全部更换，后来全部更换完后还是报错，后来又认为是需要调用任务端的网络与集群端的网络没有开通，结果验证了网络也没有问题。

结果搜了好多资料发现是异端连接问题

web端连接linux端运行mr任务失败，原因是本地idea跨平台远程调试hadoop集群出现的，在使用windows调用Hadoop yarn平台的时候都会出现类似的错误，在集群中的mapred-site配置添加mapreduce.app-submission.cross-platform true这项配置，或者在代码跨平台提交代码的方法解决问题

（报错日志忘记记录了。。）

喝污
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Hive-2.1.1-CDH-3.6.1 相关JDBC连接驱动 Jar 包集合
04-20
可用于数据库客户端连接、FineReport 等报表工具连接 包含 Jar 包列表： 01、hadoop-common-3.0.0-cdh6.3.1.jar 02、hive-exec-2.1.1-cdh6.3.1.jar 03、hive-jdbc-2.1.1-cdh6.3.1.jar 04、hive-jdbc-2.1.1-cdh6.3.1-...
CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha1
05-21
因为CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel命令生成的CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha1文件hash不匹配，自己找到官网上的parcel.sha1文件解决了这个问题，共享给大家
clouder-cdh-6.2.1 离线安装包
02-09
本资源包为 cdh6.2.1 redhat7 版本 # 目录结构如下 ├── cdh6 │   └── 6.2.1 │   └── parcels │   ├── CDH-6.2.1-1.cdh6.2.1.p0.1425774-el7.parcel │   ├── CDH-6.2.1-1.cdh6.2.1.p0.1425774-el7.parcel.sha1 │   └── manifest.json └── cm6 └── 6.2.1 ├── allkeys.asc └── redhat7 └── yum ├── cloudera-manager.repo ├── RPM-GPG-KEY-cloudera └── RPMS └── x86_64 ├── cloudera-manage
网站出现403 Forbidden错误及解决方法
SOUR_XY的博客
02-09 3496
网站出现403 Forbidden错误及解决方法 登录网站时，出现了如图所示的403错误。 解决方法_重建dns缓存 1.win+R，输入cmd 2.输入ipconfig /flushdns 3.成功刷新后，刷新网站页面，可正常访问。
retrying failed action with response code: 403 ({"type"=>"cluster_block_exception", "reason"=>"block
TOOCRUEL
09-27 1万+
原文：https://www.toocruel.net/logstash-outputs-elasticsearch-retrying-individual-bulk-actions-that-failed-or-were-rejected-by-the-previous-bulk-request-count-1/ 在用logstash收集mysql数据到elasticsearch中时，运行一段时...
大数据平台搭建 - cdh5.11.1 - hue安装及集成其他组件
weixin_30265171的博客
05-12 282
一、简介 hue是一个开源的apache hadoop ui系统，由cloudear desktop演化而来，最后cloudera公司将其贡献给了apache基金会的hadoop社区，它基于python框架django实现的。 通过使用hue，我们可以使用可视化的界面在web浏览器上与hadoop集群交互来分析处理数据，例如操作hdfs上的数据，运行MapReduce Job，查看H...
retrying failed action with response code: 403 错误解决
weixin_30315905的博客
06-11 1913
[2019-06-10T06:52:51,610][INFO ][logstash.outputs.elasticsearch] retrying failed action with response code: 403 ({"type"=>"cluster_block_exception", "reason"=>"blocked by: [FORBIDDEN/12/index re...
教你一步学会安装Hue
weixin_30861459的博客
11-28 223
一、简介 hue是一个开源的apachehadoopui系统，由cloudeardesktop演化而来，最后cloudera公司将其贡献给了apache基金会的hadoop社区，它基于python框架django实现的。 通过使用hue，我们可以使用可视化的界面在web浏览器上与hadoop集群交互来分析处理数据，例如操作hdfs上的数据，运行MapReduceJob，查看HBase中...
Neo4j ERROR: Detected VM stop-the-world pause: {pauseTime=111, gcTime=0, gcCount=0}
aCupxxx的博客
10-11 700
问题: 服务访问慢,neo4j执行cql查询语句慢,neo4j日志报错警告: Detected VM stop-the-world pause.原因: 服务端存在单条CQL语句对大量节点node执行修改的语句;单条CQL操作数据量大(2M),执行耗时长(4h).解决: 优化改慢修改慢查询CQL,改为批量修改等方式. 2022-10-10 11:24:58.437+0800 WARN [o.n.k.i.c.VmPauseMonitorComponent] Detected VM stop-the-world
Hue 创建Hbase 表 出现Api 错误：HTTPConnectionPool(host= port=9090): Read timed out.
BertramLAU的专栏
06-06 1771
系统环境 CDH 6.3.1 Hue 4.4.0 错误现象 Hue 创建hbase 表，遇到如下错误： hue server log: [06/Jun/2020 13:54:46 +0800] access INFO 192.168.8.69 hue - "POST /hbase/install_examples HTTP/1.1" returned in 120103ms [06/Jun/2020 13:54:46 +0800] thrift_util INFO Thrif
403错误服务器未响应是什么意思,什么是HTTP ERROR 403？导致403错误的主要原因及解决方法...
weixin_31486261的博客
08-10 5万+
一、什么是HTTP ERROR 403403 Forbidden 是HTTP协议中的一个状态码(Status Code)。可以简单的理解为没有权限访问此站，服务器受到请求但拒绝提供服务。二、HTTP 403 状态码解释大全403.1 -执行访问禁止。403.2 -读访问禁止。403.3 -写访问禁止。403.4要求SSL。403.5 - 128要求SSL。403.6 - IP地址被拒绝。403.7...
解决Nginx出现403 forbidden (13: Permission denied)报错的四种方法
热门推荐
习惯的力量
07-18 60万+
虚拟机中通过yum安装nginx的，安装一切正常，但是访问时报403，nginx.config ps chmod reboot 于是查看nginx日志，路径为/var/log/nginx/error.log。打开日志发现报错Permission open() "/data/www/1.txt" failed (13: Permission denied), client: 192.
hadoop-yarn-common-2.6.5-API文档-中文版.zip
04-07
赠送jar包：hadoop-yarn-common-2.6.5.jar 赠送原API文档：hadoop-yarn-common-2.6.5-javadoc.jar 赠送源代码：hadoop-yarn-common-2.6.5-sources.jar 包含翻译后的API文档：hadoop-yarn-common-2.6.5-javadoc-...
CDH-5.9.0-1.cdh5.9.0.p0.23-el7.parcel.tar.gz.aa
02-26
CDH-5.9.0-1.cdh5.9.0.p0.23-el7.parcel（该文件被分割成三个压缩包，例如：.aa/.ab.ac） CDH-5.9.0-1.cdh5.9.0.p0.23-el7.parcel.sha 由于 CSDN 资源文件大小的限制，分割成三个压缩文件了，下载后合并解压即可
错误: retrying failed action with response code: 403故障解决
weixin_43334878的博客
09-14 2514
上午清理了一个400多个G的json.log文件，重启了docker服务和elk容器，登录kibana发现并没有日志展示，排查了一段时间，发现清理的json.log文件内一直报这个错误 retrying failed action with response code: 403 ({\"type\"=\u003e\"cluster_block_exception\", \"reason\"=\u003e\"blocked by: [FORBIDDEN/12/index read-only / allow..
导致403错误的原因和解决方法
u010227042的博客
11-22 14万+
一、导致403错误的主要原因 　　403 Forbidden错误的原因和解决方法 　　1、你的IP被列入黑名单。 　　2、你在一定时间内过多地访问此网站(一般是用采集程序)，被防火墙拒绝访问了。 　　3、网站域名解析到了空间，但空间未绑定此域名。 　　4、你的网页脚本文件在当前目录下没有执行权限。 　　5、在不允许写/创建文件的目录中执行了创建/写文件操作。 　　6、以http方式访问需要ssl连接的网址。 　　7、浏览器不支持SSL 128时访问SSL 128的连接。 　　8、在身份验证
returned a response status of 403 Forbidden
hello_boyu的博客
07-17 397
使用Springmvc进行跨服务器上传图片时报了如下错误 意思就是说没有写入的权限， 打开该tomcat的web.xml文件 找到下面代码加入： <init-param> <param-name>readonly</param-name> <param-value>false</param-value> </init-param> 最后再重启tomcat就ok啦 ...
403 Forbidden错误的原因和解决方法
段占彪的博客
09-12 8万+
转载自：http://www.mahaixiang.cn/seoyjy/403.html [TOC] 前言 在访问网站的时候，会时不时的出现403 Forbidden错误，浏览器会给出403 Forbidden错误提示，在打开Access Error中列出的URL之后, 出现以下错误： 403 Forbidden Access to this resource on t...
cdh-6.3.2下载
最新发布
01-29
CDH-6.3.2是由Cloudera提供的一个开源的Hadoop生态系统版本。CDH包含了许多Apache项目，如Hadoop、HBase、Hive、Impala等，并且集成了Cloudera自家开发的一些工具和服务。 要下载CDH-6.3.2，首先需要访问Cloudera...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值