Spark的RDD操作有哪些

2023-04-07 12:47:00 操作 Spark 有哪些

Spark的RDD操作主要有两类:转换操作和行动操作。

转换操作

转换操作是对RDD中的每个元素应用一个函数,并返回一个新的RDD。常见的转换操作有map、filter、flatMap、groupByKey、reduceByKey、sortByKey等。

行动操作

行动操作是对RDD中的数据进行计算,并返回一个结果。常见的行动操作有reduce、collect、count、take、saveAsTextFile等。

相关文章