scala eclipse导入spark-assembly-1.6.0-hadoop2.6.0.jar工程出现红色叉

最新推荐文章于 2023-02-07 14:07:09 发布
原创 最新推荐文章于 2023-02-07 14:07:09 发布 · 1w 阅读 · 2 ·
本内容遵循CC 4.0 BY-SA版权协议
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
标签
#scala
在使用Eclipse编写Spark代码时遇到导入指定jar包后无法编译的问题。通过将Scala编译器设置为2.10版本，成功解决了该问题。本文详细介绍了问题原因及解决方案。
今天在用eclipse编写spark代码的时候发现只要是导入了spark-assembly-1.6.0-hadoop2.6.0.jar就报错，不能编译运行了。也没查到资料，突然想起来Spark1.6.0官网上的包好像是基于scala2.10编译好的。如果scala2.11需要自己编译。我下载的是编译好的。然后工程上右键->Properties->scala Compiler-然后调成2.10，然后编译成功。问题解决。
spark-assembly-1.6.1-hadoop2.6.0.jar
06-11
spark-assembly-1.6.1-hadoop2.6.0.jar,欢迎下载，，，，，，，，，，，，，，，，，，，，
spark-assembly-1.6.0-cdh5.9.2-hadoop2.6.0-cdh5.9.2.jar
05-24
spark-assembly-1.6.0-cdh5.9.2-hadoop2.6.0-cdh5.9.2.jar
spark安装及环境搭建
yunini2的博客
02-17 1274
安装 版本配套 Spark: 1.6.2 Scala: 2.12.1 软件安装 1、安装JDK 手工配置JAVA_HOME环境变量，并将JDK的bin目录加入Path环境变量中。 2、安装Scala Windows版 通过.msi软件包安装。安装完成后自动配置环境变量SCALA_HOME，并将scala下的bin目录加入Path环境变量中。 下载地址：htpp://w
基于Intellij IDEA的Spark(Scala)开发
Charles.L的博客
09-28 946
一、实验预备环境： 1.JDK1.8.0 2.Windows 7 64位系统 二、准备工具： 1.Intellij IDEA 2017.2.5 Ultimate版 2.Scala 2.10 3.spark-1.6.0-bin-hadoop2.6 三、主要步骤： 1.安装spark； 2.安装scala； 3.安装IDEA； 4.编写一个scala程序。 四、详细过程： 1...
Spark MLlib 入门学习笔记 - 编程环境配置
老胡的笔记
05-18 6471
在windows下配置Spark MLlib的编程环境。
Spark企业级环境搭建
马超的博客
10-21 915
Chinahadoop-1节点安装Spark即可，在提交作业时由Yarn动态分发运行环境包括jar包、executor、driver等。不需要分布式部署Spark。 下载hadoop压缩包之后解压hadoop后，配置文件在…/etc/hadoop目录下。 下载Spark压缩包之后，解压进入Spark目录，找到conf进行配置。spark-env.sh（打通hadoop） spark-def
ganglia学习2之Spark编译带有ganglia的版本
Keep Learning
11-09 1646
更多代码请见：https://github.com/xubo245/SparkLearningspark源码解读系列环境：spark-1.5.2、hadoop-2.6.0、scala-2.10.4，ganglia-3.6.11.理解Spark除了自带的UI，还支持ganglia，编辑$SPARK_HOME/conf/metrics.properties文件（没有可以拷贝metrics.propert
对应chd5.14的spark_CDH5.14集成Spark-sql，并用2种方式运行sql。附案例
weixin_39842237的博客
12-22 269
本篇文章主要讲述如何在CDH中启动Spark Thrift。本次测试的版本：CDH版本：5.14.2spark：1.6.0文中主要用root来部署，但是启动的时候用的spark用户，中间会有一些权限方面的问题。大家可以根据提示自行添加权限。我这边权限不够默认都给了777，方便测试。文中的spark服务器与hive元数据的服务器不在同一台服务器上。所以不会涉及端口冲突的错误。(spark Thrif...
spark-assembly-1.5.2-hadoop2.6.0.jar
12-21
spark-assembly-1.5.2-hadoop2.6.0 在spark编程中使用的一个jar
spark-assembly-1.5.0-hadoop2.6.0jar包
08-11
spark-assembly-1.5.0-hadoop2.6.0jar包，本地开发Spark应用 必须要用到的jar包
hadoop2.6.0+spark1.0所需资源
02-04
hadoop-2.6.0.tar.gz + ideaIC-13.1.6.tar.gz + jdk-7u75-linux-i586.tar.gz + scala-2.10.4.tgz + spark-1.0.0-bin-hadoop2.tgz
spark-assembly-1.5.2-hadoop2.6.0jar包
08-14
使用scala开发spark应用时用到的jar包：spark-assembly-1.5.2-hadoop2.6.0jar包
windows中用scala-IDE开发spark—— WordCount
u010925958的博客
09-28 1416
一、环境配置 1、scala IDE：http://scala-ide.org/download/sdk.html 2、spark：http://spark.apache.org/downloads.html 3、winutils： 二、构建scala项目 三、WordCount源码
spark 1.6.0 安装与配置（spark1.6.0、Ubuntu14.04、hadoop2.6.0、scala2.10.6、jdk1.7）
weixin_30606461的博客
12-06 290
前几天刚着实研究spark，spark安装与配置是入门的关键，本人也是根据网上各位大神的教程，尝试配置，发现版本对应最为关键。现将自己的安装与配置过程介绍如下，如有兴趣的同学可以尝试安装。所谓工欲善其事必先利其器，下面咱们将进入安装教程。 2016-12-06 10:17:07 环境 本教程使用了Ubuntu 14.04 64位作为系统环境，用到的安装程序有：jdk 1.7、spark-1...
kafka+flume+sparkStreaming+HDFS实时日志分析系统
小明
02-07 686
flumme + kafka + sparkStreaming 构建实时文件处理系统 搭建前提： Hadoop2.6、spark1.6-hadoop-2.6集群都是正确搭建并可运行 一 、需求描述 日志文件预处理：运营商数据 kafka做队列缓冲 flume分发 streaming计算 HDFS存储 二、 系统搭建 No.1 flume-ng 1.
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值