按照开发语言的不同,分为Java、Scala和Python开发环境。其中Java和Scala开发环境搭建步骤相同,不同点在于Java首选Maven进行构建,Scala首选sbt进行构建,Scala也可以用Maven构建
版本
- spark:2.2.0
- java:1.8
- scala:2.11.8
- maven:3.3.9
- hadoop:2.6.5
说明:如果官网下载太慢,可以拷贝下载链接后使用迅雷下载
搭建步骤(Java版)
- Java安装教程
- Scala安装教程
- Maven安装教程
- Hadoop安装教程
- Spark安装教程
- IDEA安装教程
- JavaWordCount
- 打包并提交运行Spark程序--待输出
搭建步骤(Scala版)
- Java安装教程
- Scala安装教程
- Maven安装教程
- Hadoop安装教程
- Spark安装教程
- IDEA安装教程
- WordCount
- 打包并提交运行Spark程序--待输出
搭建步骤(Python版)
- Java安装教程
- Scala安装教程
- Maven安装教程
- Hadoop安装教程
- Spark安装教程
- Anaconda3安装教程
- PyCharm安装教程
- wordcount
- 提交运行Spark程序--待输出
搭建步骤(Jupyter版)
- Java安装教程
- Scala安装教程
- Maven安装教程
- Hadoop安装教程
- Spark安装教程
- Anaconda3安装教程
- Jupyter配置教程
网友评论