- 博客(4)
- 问答 (1)
- 收藏
- 关注
RSS订阅原创 Hadoop学习笔记之YARN
Hadoop1.x时：MapReduce：Master/Slave架构，1个JobTracker带多个TaskTrackerJobTracker： 负责资源管理和作业调度TaskTracker： 定期向JT汇报本节点的健康状况、资源使用情况、作业执行情况； 接收来自JT的命令：启动任务/杀死任务YARN：不同计算框架可以共享同一个HDFS集群上的数据，享受整体的资源调度XXX on YARN的好处...
2018-03-21 00:39:36
384
原创 git 常用命令--持续更新
# git 常用命令===================================1) git init 生成本地git仓库2)git status 查看本地仓库的变化3)git add . 添加所有文件4)git commit -am '注释' 提交的本地仓库5)git remote add origin https://git.coding.net/shenyangyang121/e-...
2018-03-20 21:50:30
277
转载 Hadoop学习日记之hdfs读写流程
转载自:http://blog.chinaunix.net/uid-27105712-id-3274395.html 分布式文件系统比较出名的有HDFS 和 GFS，其中HDFS比较简单一点。本文是一篇描述非常简洁易懂的漫画形式讲解HDFS的原理。比一般PPT要通俗易懂很多。不难得的学习资料。1、三个部分: 客户端、nameserver（可理解为主控和文件索引类似linux的inode）、data...
2018-03-20 21:47:01
242
原创 Hadoop学习笔记之HDFS架构
1 Master(NameNode/NN) 带 N个Slaves(DataNode/DN)HDFS/YARN/HBase1个文件会被拆分成多个Blockblocksize：128M130M ==> 2个Block： 128M 和 2MNN：1）负责客户端请求的响应2）负责元数据（文件的名称、副本系数、Block存放的DN）的管理DN：1）存储用户的文件对应的数据块(Block)2）要定期向...
2018-03-20 21:44:45
361
空空如也
各位大哥，帮忙看看JS AJAX的一个问题
2017-02-28
TA创建的收藏夹 TA关注的收藏夹
TA关注的人