- 博客(2)
- 资源 (2)
- 收藏
- 关注
RSS订阅原创 Spark常见算子总结
官方文档上列举共有32种常见算子，包括Transformation的20种操作和Action的12种操作。 内容自己用心整理，看我的就够了 Transformation： 1.map map的输入变换函数应用于RDD中所有元素，而mapPartitions应用于所有分区。区别于mapPartitions主要在于调用粒度不同。如parallelize（1 to 10， 3），map函数执行10次，而...
2019-10-10 11:32:57
534
原创 Scala集合总结
Scala集合总结 最近有时间看了一下Scala，总结了一下Scala集合，和大家分享一下。 1.基本概念 scala中的集合类可以分为三大类： 1.Seq，是一组有序的元素，比如List，Array 2.Set，是一组没有重复元素的集合。 3.Map，是一组k-v对。 Scala集合有三个基本操作： head 返回集合第一个元素 tail 返回一个集合，包含除了第一元素之外的其他元素 isEmp...
2019-09-26 19:56:12
288
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人