spark的转换和行动算子

总所周知，spark中有两种算子：转换  和 行动 算子，面试的时候可能会被问到，今天就将他们一一列举：

Transform转换算子：

map、flagMap、distinct

coalesce、repartition

randomSplit、glom

union、intersection、subtract

mapPartitions、mapPartitionsWithIndex

zip、zipPartitions

zipWithIndex、zipWithUniqueId

partitionBy、mapValues、flatMapValues

combineByKey、foldByKey?

groupByKey、reduceByKey、reduceByKeyLocally

cogroup、join

leftOuterJoin、rightOuterJoin、subtractByKey

 

Action行动算子：

first、count、reduce、collect

take、top、takeOrdered

aggregate、fold、lookup

countByKey、foreach、foreachPartition、sortBy

saveAsTextFile、saveAsSequenceFile、saveAsObjectFile

saveAsHadoopFile、saveAsHadoopDataset

saveAsNewAPIHadoopFile、saveAsNewAPIHadoopDataset