美文网首页
Linux安装Scala和Spark

Linux安装Scala和Spark

作者: 思君_4cd3 | 来源:发表于2019-05-16 18:14 被阅读0次

一:安装Scala:

1.导入压缩包

在/mnt/hgfs/tool/目录下找到Scala压缩包将其复制到/usr下

  • sudo cp scala-2.12.3.tgz /usr


    步骤
2.解压缩
  • sudo tar -zxvf scala-2.12.3.tgz


    步骤
3.更名
  • sudo mv scala-2.12.3 scala


    步骤
4.修改权限为hadoop
  • sudo chown hadoop:hadoop scala


    步骤
5.回到根目录下
  • cd
6.更改bashrc文件
  • vi .bashrc
    步骤
    添加以下内容:
    添加内容
    export SCALA_HOME=/usr/scala
    export PATH={SCALA_HOME}/bin:PATH
7.保存bashrc文件
  • source .bashrc


    步骤
8.验证Scala是否安装完成
  • scala -version


    步骤i

    出现如上文字则说明安装完成

二:安装spark:

1.导入压缩包

在/mnt/hgfs/tool/目录下找到spark压缩包将其复制到/usr下

  • sudo cp spark-2.2.0-bin-hadoop2.6.tgz /usr
    (和上面一样的步骤)
2.解压缩
  • sudo tar -zxvf spark-2.2.0-bin-hadoop2.6.tgz


    步骤
3.更名
  • sudo mv spark-2.2.0-bin-hadoop2.6 spark


    步骤
4.修改权限为hadoop
  • sudo chown hadoop:hadoop spark


    步骤
5.回到根目录下
  • cd
6.更改bashrc文件
  • vi .bashrc


    步骤

    添加以下内容:


    步骤

export SCALA_HOME=/usr/spark
export PATH={SPARK_HOME}/bin:PATH

7.保存bashrc文件
  • source .bashrc


    步骤
8.验证spark是否安装完成
  • spark-shell


    步骤

    出现如下文字则说明安装完成:


    步骤

(此文章仅作为个人学习笔记使用,如有错误欢迎指正~)

相关文章

  • IDEA本地运行spark程序

    idea 里面 加入scala sdk和 spark jar 本地安装spark 并启起来 本地安装scala 代...

  • Linux安装Scala和Spark

    一:安装Scala: 1.导入压缩包 在/mnt/hgfs/tool/目录下找到Scala压缩包将其复制到/usr...

  • Spark编程实践

    使用Scala和Java编写Spark程序。 Spark编程 Scala实现 sbt 首先安装sbt 赋予权限 添...

  • spark配置安装

    spark配置 一. Scala安装 二. spark安装 启动spark服务:

  • spark

    spark spark的安装 安装Scala下载页面:http://www.scala-lang.org/file...

  • Spark+hadoop环境配置

    1.下载安装包 虚拟机 jdk-1.8 scala spark Hadoop 2.安装虚拟机和Linux 3.配置...

  • Mac安装Scala+Spark+SBT环境

    安装Scala安装Spark验证Demo脚本 安装Scala 1、brew安装Scalabrew install ...

  • spark配置

    spark配置 一. Scala安装 二. spark安装 启动spark服务: 运行模式 本机模式./spark...

  • windows下安装spark

    1、安装jdk 2、安装scala 3、下载spark spark下载地址 3.1安装spark 将下载的文件解压...

  • windows环境下做spark开发

    windows下spark运行环境搭建 准备安装包:jdk, scala, hadoop, spark 和 win...

网友评论

      本文标题:Linux安装Scala和Spark

      本文链接:https://www.haomeiwen.com/subject/bquxaqtx.html