hadoop
文章平均质量分 56
whj3366
时光过客
展开
-
Windows中安装hadoop2.7.3
环境 主机:Windows 10 Hadoop:2.7.3 Java:1.8 声明:参考了简书maxkibble作者的文章,地址:https://www.jianshu.com/p/faf038923093, 学习过程中遇到的问题,作为记录保存在此;在以下过程中如遇错误,还请移步至 maxkibble查看对应解决方案,这里就不在一一列举了 步骤 1、jdk是否已存在,不存在请安装 2、下载 hadoop-2.7.3.tar.gz 地址:https://archive.apache...原创 2021-02-26 15:33:19 · 975 阅读 · 0 评论 -
Idea远程调用 Spark+Hadoop 资源计算
Idea远程调用 Spark+Hadoop 资源计算 版本:Spark2.4.7 Scala2.11.12 Hadoop 2.7.3 不多说,上源码 package com.spark.scala.example import org.apache.spark.{SparkConf, SparkContext} object WorldCount { def main(args: Array[String]): Unit = { // 设置提交任务的用户 System...原创 2021-02-18 18:20:10 · 300 阅读 · 0 评论