collect()

作者: yayooo | 来源:发表于2019-08-06 20:18 被阅读0次

作用:在驱动程序中,以数组的形式返回数据集的所有元素。
将结果收集到Driver端。

package com.atguigu

import org.apache.spark.rdd.RDD
import org.apache.spark.{SparkConf, SparkContext}

object Action {
  def main(args: Array[String]): Unit = {
    val conf: SparkConf = new SparkConf().setMaster("local[*]").setAppName("ADCount")

    val sc = new SparkContext(conf)

    val rdd: RDD[Int] = sc.makeRDD(List(1,4,3,2))

    val array: Array[Int] = rdd.collect()
    array.foreach(println)
  }
}

1
4
3
2

相关文章

  • Learning Spark [6] - Spark SQL高级

    collect, collect_list, collect_set collect常用的有两个函数:collec...

  • 17-SparkCore04

    collect collect countByKey countByValue collectAsMap grou...

  • spark sql ----- sql on spark

    待补充# Spark2 Dataset之collect_set与collect_list collect_set去...

  • JSONArray转以某字段为key的Map

    Map collect = menuQueue.stream().collect( Collectors.toMa...

  • collect

    tableView 只刷新行高,不刷新内容 这两个方法会让所有的cell重新布局,然后重新计算高度。 只刷新内容 ...

  • collect

    Immutable Immutable React + Rdeux example react+webpack+e...

  • Collect

    https://taizilongxu.gitbooks.io/stackoverflow-about-pytho...

  • collect()

    作用:在驱动程序中,以数组的形式返回数据集的所有元素。将结果收集到Driver端。 1432

  • Collect

    (gps纠偏及大陆地图偏移原因)(让我们来告诉你这次国内对 Gmail 都屏蔽了什么)(谷歌内部视频《 The S...

  • Collect_list/Collect_set

    Hive中collect相关的函数有collect_list和collect_set。 它们都是将分组中的某列转为...

网友评论

      本文标题:collect()

      本文链接:https://www.haomeiwen.com/subject/blazrctx.html