scala eclipse导入spark-assembly-1.6.0-hadoop2.6.0.jar工程出现红色叉

最新推荐文章于 2017-05-18 18:05:58 发布
最新推荐文章于 2017-05-18 18:05:58 发布
阅读量1w 收藏 2
点赞数 2
分类专栏： Scala Spark 文章标签： scala
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/brotherdong90/article/details/51199075
版权
今天在用eclipse编写spark代码的时候发现只要是导入了spark-assembly-1.6.0-hadoop2.6.0.jar就报错，不能编译运行了。也没查到资料，突然想起来Spark1.6.0官网上的包好像是基于scala2.10编译好的。如果scala2.11需要自己编译。我下载的是编译好的。然后工程上右键->Properties->scala Compiler-然后调成2.10，然后编译成功。问题解决。
Eric-L90
关注
  • 2
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
专栏目录
spark入门实战windows本地测试程序
hetianguang的博客
06-16 9853
在做Spark开发时，一般会在windows下进行Spark本地模式程序调试，在本地调试好了再打包运行在Spark集群上。因此需要在windows上进行Spark开发配置。本文将给出三种开发工具的配置：1、使用eclipse java api开发；2、使用scala IDE开发；3、使用IntelliJ IDEA 开发。 1、windows下环境 在安装开发软件之前，首先需要安装JAVA 和S
Spark1.6.0-Hadoop2.6配置过程
jingjbuer的专栏
04-14 2982
spark目录下的conf文件夹下存放着spark的一系列配置文件
spark-assembly-1.6.1-hadoop2.6.0.jar
06-11
spark-assembly-1.6.1-hadoop2.6.0.jar,欢迎下载，，，，，，，，，，，，，，，，，，，，
Spark企业级环境搭建
马超的博客
10-21 730
Chinahadoop-1节点安装Spark即可，在提交作业时由Yarn动态分发运行环境包括jar包、executor、driver等。不需要分布式部署Spark。 下载hadoop压缩包之后解压hadoop后，配置文件在…/etc/hadoop目录下。 下载Spark压缩包之后，解压进入Spark目录，找到conf进行配置。spark-env.sh（打通hadoop） spark-def
Spark MLlib 入门学习笔记 - 编程环境配置
老胡的笔记
05-18 6218
在windows下配置Spark MLlib的编程环境。
ganglia学习2之Spark编译带有ganglia的版本
Keep Learning
11-09 1354
更多代码请见：https://github.com/xubo245/SparkLearningspark源码解读系列环境：spark-1.5.2、hadoop-2.6.0、scala-2.10.4，ganglia-3.6.11.理解Spark除了自带的UI，还支持ganglia，编辑$SPARK_HOME/conf/metrics.properties文件（没有可以拷贝metrics.propert
spark-assembly-1.5.2-hadoop2.6.0.jar
12-21
spark-assembly-1.5.2-hadoop2.6.0 在spark编程中使用的一个jar
spark-assembly-1.6.0-cdh5.9.2-hadoop2.6.0-cdh5.9.2.jar
05-24
spark-assembly-1.6.0-cdh5.9.2-hadoop2.6.0-cdh5.9.2.jar
spark-assembly-1.5.0-hadoop2.6.0jar包
08-11
spark-assembly-1.5.0-hadoop2.6.0jar包，本地开发Spark应用 必须要用到的jar包
hadoop2.6.0+spark1.0所需资源
02-04
hadoop-2.6.0.tar.gz + ideaIC-13.1.6.tar.gz + jdk-7u75-linux-i586.tar.gz + scala-2.10.4.tgz + spark-1.0.0-bin-hadoop2.tgz
spark-assembly-1.5.2-hadoop2.6.0jar包
08-14
使用scala开发spark应用时用到的jar包：spark-assembly-1.5.2-hadoop2.6.0jar包
spark-3.4.1-bin-hadoop3.tgz - Spark 3.4.1 安装包(内置了Hadoop 3)
07-19
文件名: spark-3.4.1-bin-hadoop3.tgz 这是 Apache Spark 3.4.1 版本的二进制文件，专为与 Hadoop 3 配合使用而设计。Spark 是一种快速、通用的集群计算系统，用于大规模数据处理。这个文件包含了所有必要的组件，...
spark-2.4.0-bin-without-hadoop.tgz
06-18
spark的安装包，主要用于安装spark。Apache Spark是一个新兴的大数据处理通用引擎，提供了分布式的内存抽象。
spark-2.4.7-bin-hadoop2.7.tgz
03-19
spark2.4.7版本兼容hadoop2.7版本，官网上下载的话会很慢。
Spark2.0的Caused by: java.net.URISyntaxException: Relative path in absolute URI: file错误
BrotherDong90的专栏
09-21 4053
在使用spark2.0的时候遇到如下错误： 16/09/21 14:12:22 INFO SharedState: Warehouse path is 'file:E:\scalacode_v2\Spark2Pro/spark-warehouse'. Exception in thread "main" java.lang.IllegalArgumentException: java.net.
spark-2.4.5-bin-hadoop2.7.tgz网盘资源
最新发布
10-09
spark-2.4.5-bin-hadoop2.7.tgz是一个网盘资源，是Apache Spark框架的一个版本。Spark是一个用于大规模数据处理的开源计算框架，能够通过集群计算来处理大规模的数据，并且具有高效、快速和可扩展的特点。 下载和使用spark-2.4.5-bin-hadoop2.7.tgz可以让用户在自己的电脑上搭建和运行Spark集群环境，以便进行数据处理和分析等各种操作。该版本中包含了Spark的二进制文件，以及集成了Hadoop 2.7版本的相关文件。 使用spark-2.4.5-bin-hadoop2.7.tgz之前需要先下载并解压缩该文件。解压后，用户可以按照Spark的官方文档提供的教程和指南来配置和启动Spark集群。用户可以通过命令行或者编程API来操作和管理Spark集群，进行数据处理、机器学习、图计算等各种任务。 Spark提供了丰富的API和生态系统，可以支持多种编程语言，如Scala、Java、Python和R等。用户可以根据自己的需求选择合适的编程语言来开发和运行Spark应用程序。 总之，spark-2.4.5-bin-hadoop2.7.tgz是一个方便用户在本地环境中搭建和运行Spark集群的网盘资源，可以帮助用户更加方便地进行大规模数据处理和分析。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值