- 博客(3)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 总是混淆的UML关系图
出处：http://design-patterns.readthedocs.io/zh_CN/latest/read_uml.html 从一个示例开始 请看以下这个类图，类之间的关系是我们需要关注的： 车的类图结构为<<abstract>>，表示车是一个抽象类； 它有两个继承类：小汽车和自行车；它们之间的关系为实现关系，使用带空心箭头的虚线表示； 小汽车...
2018-08-08 10:54:47
100
转载 Spark 运行探索
转载自：http://sharkdtu.com/posts/pyspark-internal.html Spark主要是由Scala语言开发，为了方便和其他系统集成而不引入scala相关依赖，部分实现使用Java语言开发，例如External Shuffle Service等。总体来说，Spark是由JVM语言实现，会运行在JVM中。然而，Spark除了提供Scala/Java开发接口外，还提供...
2018-07-24 15:30:14
156
转载 Spark dependency
转自 https://blog.csdn.net/u012922838/article/details/78057184 Spark中RDD的高效与DAG图有着莫大的关系，在DAG调度中需要对计算过程划分stage，而划分依据就是RDD之间的依赖关系。针对不同的转换函数，RDD之间的依赖关系分类窄依赖（narrow dependency）和宽依赖（wide dependency, 也称 shuf...
2018-07-24 15:25:15
400
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人