Spark take函数

Spark take函数

在Spark中,take函数的行为类似于数组。它接收一个整数值(假设为n)作为参数,并返回数据集的前n个元素的数组。

take函数的示例

在这个示例中,我们返回现有数据集的前n个元素。

  • 要在Scala模式下启动Spark,请按照以下命令执行。
$ spark-shell

Spark take函数

  • 使用并行集合创建RDD。
scala> val data = sc.parallelize(List(10,20,30,40,50))
  • 现在,我们可以使用以下命令来阅读生成的结果。
scala> data.collect

Spark take函数

  • 将take()函数应用于返回元素数组。
scala> val takefunc = data.take(3)

Spark take函数

这里,我们得到了期望的输出。

Camera课程

Python教程

Java教程

Web教程

数据库教程

图形图像教程

办公软件教程

Linux教程

计算机教程

大数据教程

开发工具教程