MapReduce1架构设计
MapReduces1架构设计
hadoop1.x MR1 (计算+资源作业调度)
存在JobTracker和TaskTracker(map task+reduce task)两个进程，属于主从架构
JobTracker:
监控资源和作业调度，通过心跳监控所有TaskTracker和job健康状况
告诉调度器踪任务使用资源使用情况
TaskTracker:
负责接收和执行JobTracker发送的命令
将节点资源使用情况和任务情况汇报JobTracker
TaskScheduler:
任务调度器(FIFO原则 先出先出,根据作业优先 时间先手顺序执行)
hadoop1.x MR1 (计算+资源作业调度)
存在JobTracker和TaskTracker(map task+reduce task)两个进程，属于主从架构
JobTracker:
监控资源和作业调度，通过心跳监控所有TaskTracker和job健康状况
告诉调度器踪任务使用资源使用情况
TaskTracker:
负责接收和执行JobTracker发送的命令
将节点资源使用情况和任务情况汇报JobTracker
TaskScheduler:
任务调度器(FIFO原则 先出先出,根据作业优先 时间先手顺序执行)
来自 “ ITPUB博客 ” ，链接：https://blog.itpub.net/31441024/viewspace-2155250/ ，如需转载，请注明出处，否则将追究法律责任。
请登录后发表评论
登录
全部评论
