已经解决ProcfsMetricsGetter: Exception when trying to compute pagesize

最新推荐文章于 2023-11-10 15:57:10 发布

13742370

最新推荐文章于 2023-11-10 15:57:10 发布

阅读量1.6w

点赞数 3

分类专栏：运行spark-shell出现问题文章标签： spark

本文链接：https://blog.csdn.net/weixin_45171416/article/details/107525222

版权

在安装JDP、Scala、Hadoop和Spark后，运行spark-shell时遇到ProcfsMetricsGetter异常，尝试计算pagesize失败导致ProcessTree指标报告停止。通过将Spark版本从3.0.0切换到2.4.6，并调整环境变量路径，成功解决问题。解决方案来源于网络分享。

摘要由CSDN通过智能技术生成

已解决ProcfsMetricsGetter: Exception when trying to compute pagesize, as a result reporting of ProcessTree metrics is stopped

已解决ProcfsMetricsGetter问题！

按照流程安装了JDP、scala、hadoop和spark后，运行spark-shell。出现以下情况。

 C:\Users\菜鸟新人的姓名>spark-shell
Using Spark's default log4j profile: org/apache/spark/log4j-defaults.properties
Spark context Web UI available at http://LAPTOP-TPAT0U8U:4040
Spark context available as 'sc' (master = local[*], app id = local-1595427757812).
Spark session available as 'spark'.
Welcome to
      ____              __
     / __/__  ___ _____/ /__
    _\ \/ _ \