51工具盒子

依楼听风雨
笑看云卷云舒,淡观潮起潮落

Spark

Spark算子实战Java版,学到了

Spark算子实战Java版,学到了

厉飞雨 阅读(5) 评论(0) 赞(0)

# (一)概述 算子从功能上可以分为Transformations转换算子和Action行动算子。转换算子用来做数据的转换操作,比如map、flatMap、reduceByKey等都是转换算子,这类算子通过懒加载执行。行动算子的作用是触发执行,比如foreach、collect、count等都是行动算子,只有程序运行到行动算子时,转换算子才会去执行。 本文将介绍开发过程中常