我使用的是spark2.1 官方的Scala依赖是2.11, spark2.2 的依赖也是2.11 所以如果你的Scala版本是2.22或者较老版本，还是换到这个版本比较好，不然可能会报错或者出现context不能初始化的问题，
比如报：
Exception in thread "main" java.lang.NoSuchMethodError: scala.Predef$.refArrayOps([Ljava/lang/Object;)Lscala/collection/mutable/ArrayOps;
这就是版本不对导致的。
然后就是安装idea，再安装Scala插件，也很简单，
2017-07-29 下午5.39.24.png
2017-07-29 下午5.40.37.png
然后导入依赖，
2017-07-29 下午5.41.37.png
2017-07-29 下午5.42.34.png
点左下角的那个➕号选择下载的spark包中的jars目录
然后就可以编写代码了。
并且能够在idea中运行。
我使用的是spark2.1 官方的Scala依赖是2.11, spark2.2 的依赖也是2.11 所以如果你的S...
根据自己开发习惯记录下IDEA的相关配置，基于IDEA版本：2020.1.4 1 必要配置 更改所有运行空间配置 ...
默认安装IDEA在安装目录的bi目录下面，有一个.vmoptions文件，这个文件可以对IDEA启动和运行进行配置...
JProfiler的安装配置 JProfiler中配置idea 选择前需要关联的idea，选择之前关闭正在运行的i...
git拉取项目 删除.idea配置 idea运行 先打开文件图片.png 配置maven仓库地址 将web变成we...
IDEA配置 在IDEA里打开【运行/调试配置】窗口，新建一个Remote对话框（点击绿色+号，在下拉框里可以选择...
在 .idea/workspace.xml 文件中找到 添加配置节点 完整配置 运行项目就出来了
本文基于spark2.1进行解析 前言 Spark作为分布式的计算框架可支持多种运行模式： 本地运行模式 （单机）...
简介 idea已被业界定义为最佳java编辑器，此文主要介绍play framework在idea中的运行配置，至...
开发工具:Idea运行环境:Windows Jetty:安装配置:https://www.cnblogs.com/...
本文标题：spark2.1 IDEA的配置运行
本文链接：https://www.haomeiwen.com/subject/rysclxtx.html
网友评论