自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(3)
  • 资源 (17)
  • 问答 (2)
  • 收藏
  • 关注

原创 Spark常用RDD操作汇总

Spark RDD 常用RDD操作汇合(不含键值对操作)针对以上操作给出部分仿例常用RDD操作知识图谱学习RDD转化操作、行动操作    转化操作        一个数据集RDD            map、flatMap、filter、distinct、sample    ...        两个数据集RDD            un

2015-12-05 18:50:48 541

转载 http://airos.blog.51cto.com/10853324/1719870

初识Spark RDDSpark 工作方式    1、从外部数据创建输入RDD    2、对RDD进行转化操作生成新的RDD    3、需要被重复利用的中间结果RDD进行持久化操作,如 persist()    4、使用行动操作触发一次并行计算,Spark对计算优化后再执行创建RDD    两种办法:1、分发驱动器程序中的对象集合 2、读取外部数据集    以读

2015-12-05 18:42:16 453

原创 Spark核心概念

Spark核心概念简介        一个Spark应用都由驱动器程序发起集群上的各种并发操作,一个驱动器程序一般包含多个执行器节点,驱动器程序通过一个SaprkContext对象访问saprk。RDD(弹性分布式数据集)——分布式的元素集合,RDD支持两种操作:转化操作、行动操作,如map、reduce函数。

2015-12-05 14:45:47 345

Effective Akka

Avoid common mistakes when building distributed, asynchronous, high-performance software with the Akka toolkit and runtime. With this concise guide, author Jamie Allen provides a collection of best practices based on several years of using the actor model. The book also includes examples of actor application types and two primary patterns of actor usage, the Extra Pattern and Cameo Pattern., Allen, the Director of Consulting for Typesafe—creator of Akka and the Scala programming language—examines actors with a banking-service use case throughout the book, using examples shown in Akka and Scala. If you have any experience with Akka, this guide is essential., Delve into domain-driven and work-distribution actor applications, Understand why it’s important to have actors do only one job, Avoid thread blocking by allowing logic to be delegated to a Future, Model interactions as simply as possible to avoid premature optimization, Create well-defined interactions, and know exactly what failures can occur, Learn why you should never treat actors as you would an ordinary class, Keep track of what goes on in production by monitoring everything, Tune Akka applications with the Typesafe Console

2016-12-14

Akka Essentials

akka essentials 在高并发、实时流处理...有较高的应用价值

2016-12-14

Akka in Action

Akka in Action 高并发,实时流处理有较高的应用价值

2016-12-14

Learning Akka

Learning Akka 高并发 实时处理

2016-12-14

Scala编程中文版

Scala编程中文版

2016-11-21

Programming.Scala.2nd.Edition

Programming.Scala.2nd.Edition

2016-11-21

Beginning Scala

BeginningScala

2016-11-21

processing_Creative_Coding_and_Computational_Art

processing_Creative_Coding_and_Computational_Art

2016-11-21

爱上processing

爱上processing

2016-11-21

Docker Cookbook2015

Docker Cookbook 2015

2016-11-21

Mastering OpenStack

Mastering OpenStack

2016-11-21

Machine Learning with Spark

Machine Learning with Spark

2016-11-21

Spark机器学习

Spark机器学习 中文版

2016-11-21

Openstack实战指南

openstack 实战性较强

2016-08-01

基于MOOCs大数据的学习分析和教育测量介绍_张羽

大数据的学习分析和教学测量 如今mooc等

2015-01-22

算法帝国英文版

如果说《改变未来的九大算法》是为弥散程序员气质的业余技术控洗髓内修的白话算法书,《算法帝国》就是为抱负征服世界雄心的程序员易筋外修的演义励志书,一路读来心中满盈释然和暗合之悦。搞了小半辈子算法,一直到听过凯文•斯拉文(Kevin Slavin)的TED演讲“算法如何塑造我们的世界”,才有意识地去感知周遭世界一行一止中算法的开合有度。本书大开大阖,从70年代华尔街的勃兴开始,以本世纪华尔街和硅谷的权力更替收尾,世界易帜,算法仍旧。书名直译为《算法如何控制我们的世界》,对于潜志算法的我们,是控制还是被控制?书尾赫然写道:“你很有可能统治世界,如果没有机器人抢在你前头的话。”  ——英特尔中国研究院院长 吴甘沙

2014-09-08

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除