- 博客(2)
- 收藏
- 关注
RSS订阅原创 新人分享——hadoop源码分析2
上一个博客我们说到了创建一个新的job对象了，我们从那里接着开始 在这里创建了这个类并且赋值了好多属性，这下面还有很多 不说了直接看run（）方法吧 这里创建一个outputCommiter 一开始我的F盘是这样的 这里配置好了这个类，获取outputFormat -之后就是会去读取切片的元数据信息，然后获取reduce数量，之后会设置作业进度，然后获取可运行的maptask 运...
2018-11-11 18:05:07
78
1
原创 新人分享—hadoop源码1
其实一直想写一个源码的文章，但是一直懒的写，刚好公司需要分享，就写了这个文章，如有不足，那也没办法，吼吼~ waitForCompletion 这里分别是确定状态，设置新的api（这里我使用的是Hadoop 2.7.2版本）以及连接等方法，我们看connect（）方法 这里需要返回一个Cluster对象 我们来看它的初始化方法 ...
2018-11-11 09:21:01
72
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人