Yarn平台下出现java.lang.ArithmeticException:/ by zero 该异常的调试经验

最新推荐文章于 2024-04-30 01:25:59 发布
最新推荐文章于 2024-04-30 01:25:59 发布
阅读量3.7k 收藏 1
点赞数
分类专栏： Hadoop分布式系统 文章标签： 分布式计算 mapreduce 调试
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shenxiaoming77/article/details/16802511
版权

最近在公司的Yarn平台下跑多个Mapreduce application的时候，出现了下面的异常：

java.lang.ArithmeticException:/ by zero atorg.apache.hadoop.fs.LocalDirAllocator$AllocatorPerContext.getLocalPathForWrite(LocalDirAllocator.java:368)at org.apache.hadoop.fs.LocalDirAllocator.getLocalPathForWrite(LocalDirAllocator.java:150)atorg.apache.hadoop.fs.LocalDirAllocator.getLocalPathForWrite(LocalDirAllocator.java:131)at org.apache.hadoop.fs.LocalDirAllocator.getLocalPathForWrite(LocalDirAllocator.java:115)atorg.apache.hadoop.yarn.server.nodemanager.LocalDirsHandlerService.getLocalPathForWrite(LocalDirsHandlerService.java:263)atorg.apache.hadoop.yarn.server.nodemanager.containermanager.localizer.ResourceLocalizationService$LocalizerRunner.run(ResourceLocalizationService.java:849)

 

原因分析：

该错误是由于无法创建本地文件而产生的，经过检查,一台nodemanager节点上磁盘空间不足导致无法创建本地文件, 在applcation监控页面下 查找所有出现该异常的application以及相关的task,发现都是出现在该台服务器上,最后进行磁盘空间的整理，使得application 的maptask 和reducetask 的运行恢复正常

Michael_Shentu
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
分页标签遭遇 "java.lang.ArithmeticException: / by zero"
chenzeyuan的专栏
10-28 2852
近期在做一个利用jsf前台展示的项目，使用了x:dataTable展示数据，使用x:dataScroller来分页，运行时却遭遇了如下的exception：class java.lang.ArithmeticException:/ by zerojava.lang.ArithmeticException: / by zero at org.apache.myfaces.custom.d
java.lang.ArithmeticException: / by zero
weixin_48163239的博客
06-11 1万+
java.lang.ArithmeticException: / by zero > java.lang.ArithmeticException: / by zero at com.chinamobile.cmss.vrms.transopen.service.impl.NoteWarnningServiceImpl.screenOvertimeFlow(NoteWarnningServiceImpl.java:327) ~[classes/:?] at com.chinamobile.cmss
正确解决ZeroDivisionError: division by zero异常的有效解决方法
最新发布
wbajsjhhhhh的博客
04-30 3047
正确解决ZeroDivisionError: division by zero异常的有效解决方法
java by zero_Yarn平台下出现java.lang.ArithmeticException:/ by zero 该异常的调试经验 | 学步园...
weixin_39943799的博客
02-21 94
java.lang.ArithmeticException:/ by zero atorg.apache.hadoop.fs.LocalDirAllocator$AllocatorPerContext.getLocalPathForWrite(LocalDirAllocator.java:368)at org.apache.hadoop.fs.LocalDirAllocator.getLocalP...
yarn 常见错误
niit_09的专栏
08-06 2982
1. Application application_1406781725029_0125 failed 2 times due to AM Container for appattempt_1406781725029_0125_000002 exited with exitCode: 1 due to: Exception from container-launch: org.apache.h
java.lang.NoClassDefFoundError错误解决办法
08-30
"java.lang.NoClassDefFoundError错误解决办法" java.lang.NoClassDefFoundError错误是一种常见的Java错误，它发生在Java虚拟机在编译时能找到合适的类，而在运行时不能找到合适的类导致的错误。下面是该错误的解决...
Call From hdp-1/192.168.234.129 to hdp-1:8020 failed on connection exception: java.net.ConnectExcept
01-20
报错：Exception in thread “main” java.net.ConnectException: Call From hdp-1/192.168.234.129 to hdp-1:8020 failed on connection exception: java.net.ConnectException: Connection refused; For more ...
yarn-v0.23.2.tar.gz
07-22
yarn-v0.23.2.tar.gz 在安装ambari,源码编译的时候下载的文件有问题 手动下载 地址 https://github.com/yarnpkg/yarn/releases/download/v0.23.2/yarn-v0.23.2.tar.gz
warning ..\package.json: No license field
01-07
yarn install 查了下发现是，package.json 文件中缺少license参数 { name: movie_view, version: 0.1.0, license: MIT, private: true, scripts: { serve: vue-cli-service serve, build: vue-cli-service ...
yarn-v1.22.5.tar.gz
09-14
2. 安装：解压后，进入解压后的目录，通过运行 `./install.sh` 或者 `sudo ./install.sh`（如果需要全局安装）来安装 Yarn。 3. 配置环境变量：为了使全局安装的 Yarn 可在命令行中直接使用，需要将解压目录的 bin ...
java程序中报错 java.lang.ArithmeticException: / by zero
weixin_46070150的博客
10-31 1296
java程序中报错 java.lang.ArithmeticException: / by zero
java.lang.ArithmeticException: / by zero 异常处理
热门推荐
qq_41814311的博客
08-16 1万+
当定义的 ”被除数 ” 为整形时候（short int long）会抛出此异常，被除数为整形时不可以为零。
【项目实战】java.lang.ArithmeticException: / by zero 异常处理
本本本添哥
10-27 516
(BigDecimal.ZERO).compareTo(s) == 0，可以比较是否等于0，返回true则等于0，返回false，则不等于0。当定义的 ”除数 ” 为整形时候（short int long）会抛出此异常，除数为整形时不可以为零。在项目中，对某些金额数据进行规则校验时，会出现ArithmeticException异常。
java.lang.ArithmeticException by zero
m0_67402026的博客
04-19 266
java.lang.ArithmeticException: / by zero > java.lang.ArithmeticException: / by zero at com.chinamobile.cmss.vrms.transopen.service.impl.NoteWarnningServiceImpl.screenOvertimeFlow(NoteWarnningServiceImpl.java:327) ~[classes/:?] at com.chinamobile.cmss.
dolphinscheduler 报错及解决办法
光于前裕于后的博客
04-26 1万+
1 目录权限问题 ERROR orm.CompilationManager: Could not rename /tmp/sqoop-hive/compile/4c4230b9e5d67829fa1f847893ff8560/QueryResult.java to /tmp/dolphinscheduler/exec/process/2/7/25/35/./QueryResult.java. Error: /tmp/dolphinscheduler/exec/process/2/7/25/35/./Quer
DolphinSchedule执行Spark任务失败
qq_41937507的博客
06-29 2438
现象： DolphinSchedule执行Spark任务失败,但yarn实际是执行成功的,且目标库中有执行结果. yarn： ds 的worker报错日志： [ERROR] 2021-06-28 14:59:41.693 org.apache.dolphinscheduler.common.utils.HttpUtils:[73] - null: Name or service not known java.net.UnknownHostException: null: Name
【YARN】问题汇总（持续更新）
lin86182824的博客
07-29 2470
1、TEZ一直卡主 原因是：集群的 mapreduce.map.cpu.vcores 改成了 4，hive 默认会使用这个参数作为 tez container 的 vcores。tez vcores 大于 1 时会导致无法正常启动 container，可以设置参数 hive.tez.cpu.vcores=1 来解决。 ......
解决 java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException
04-15
java.lang.NoClassDefFoundError: org/apache/hadoop/yarn/exceptions/YarnException 是一个常见的Java错误，它表示在运行时找不到特定的类。这个错误通常发生在缺少相关的依赖库或者类路径配置错误的情况下。 要解决这个错误，你可以尝试以下几个步骤： 1. 检查依赖库：确保你的项目中包含了所需的依赖库，特别是包含了 org/apache/hadoop/yarn/exceptions/YarnException 类的依赖库。你可以通过 Maven 或 Gradle 等构建工具来管理依赖。 2. 检查类路径配置：确认你的类路径配置正确无误。如果你在命令行中手动执行程序，确保你已经正确设置了 CLASSPATH 环境变量或者使用了 -cp 参数来指定类路径。 3. 检查版本兼容性：如果你使用的是不同版本的依赖库，可能会导致类加载错误。请确保你使用的所有依赖库版本兼容，并且没有冲突。 4. 清理和重新构建项目：有时候编译过程中可能会出现一些问题，导致生成的类文件不完整或者损坏。尝试清理并重新构建你的项目，以确保所有的类文件都是正确的。 5. 检查运行环境：如果你在一个分布式环境中运行程序，比如 Hadoop 或者 Spark，确保你的运行环境正确配置，并且包含了所需的依赖库。 希望以上方法能够帮助你解决这个问题！

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值