美文网首页大数据CDH
CDH下安装Spark服务

CDH下安装Spark服务

作者: 小KKKKKKKK | 来源:发表于2021-06-21 08:47 被阅读0次

    一、Spark是什么?

    是一个基于内存计算的开源的集群计算系统,Spark 启用了内存分布数据集,除了能够提供交互式查询外,它还可以优化迭代工作负载。

    二、Spark有什么用?

    它取代现有生态系统中的什么? 实际上Spark不能代替任何传统的Hadoop生态系统。因为Hadoop 2,它只是另一个运行在 YARN容器 的应用程序。因此它非常适合在Hadoop生态系统。它提供可测试 可阅读 可维护等方式编程,解放了我们编写大量MapReduce工作的痛苦,而且 提高性能 。

    三、基于CDH安装Spark

    进入Cloudera Manager主页


    image.png

    选择需要安装的集群
    添加服务


    image.png
    选择spark
    image.png

    继续
    选择依赖


    image.png
    继续
    选择角色
    image.png
    继续
    配置
    image.png
    继续
    image.png

    开始安装
    等待
    继续


    image.png
    安装完成
    完成

    相关文章

      网友评论

        本文标题:CDH下安装Spark服务

        本文链接:https://www.haomeiwen.com/subject/andueltx.html