方法、hadoop源码之JobQueueTaskScheduler-by小雨

工作之余抽点时间出来写写博文，希望对新接触的朋友有帮助。今天在这里和大家一起学习一下方法、

class JobQueueTaskScheduler extends TaskScheduler ---------FIFO

1，start()方法

public synchronized void start() throws IOException {
    super.start();
    taskTrackerManager.addJobInProgressListener(jobQueueJobInProgressListener);
    eagerTaskInitializationListener.setTaskTrackerManager(taskTrackerManager);
    eagerTaskInitializationListener.start();
    taskTrackerManager.addJobInProgressListener(
        eagerTaskInitializationListener);
}

2，assignTasks

|--job.obtainNewLocalMapTask

|--job.obtainNewNonLocalMapTask

|--job.obtainNewReduceTask

文章结束给大家分享下程序员的一些笑话语录：与女友分手两月有余，精神萎靡，面带菜色。家人介绍一女孩，昨日与其相亲。女孩果然漂亮，一向吝啬的我决定破例请她吃晚饭。
选了一个蛮贵的西餐厅，点了比较贵的菜。女孩眉开眼笑，与我谈得很投机。聊着聊着，她说：“我给你讲个笑话吧。”“ok”
　　“一只螳螂要给一只雌蝴蝶介绍对象，见面时发现对方是只雄蜘蛛。见面后螳螂问蝴蝶‘如何？’，‘他长的太难看了’，‘别看人家长的丑，人家还有网站呢’。”
　　“呵呵………”我笑。忽然她问：“你有网站吗？” 　

转载于:https://www.cnblogs.com/jiangu66/archive/2013/04/17/3025988.html

方法、hadoop源码之JobQueueTaskScheduler-by小雨相关推荐

IDEA调试hadoop源码方法
IDEA调试hadoop源码前言一.导入idea后,出现各种报错,处理掉二.调试ResourceManager 总结前言 idea调试hadopo源码步骤: 1.先在linux机器上编译had ...
Hadoop源码分析-Text
Text是Hadoop中的一个Writable类,定义了Hadoop中的其中的数据类型以及操作. This class stores text using standard UTF8 encoding ...
hadoop源码解析---INodeReference机制
本文主要介绍了hadoop源码中hdfs的INodeReference机制. 在hdfs2.6版本中,引入了许多新的功能,一些原有的源代码设计也有一定的改造.一个重要的更新就是引入了快照功能.但是当H ...
hadoop源码_HBASE源码导入IDEA并开启DEBUG调试
前言:为了更深入的理解HBase的源码,对源码进行跟踪调试是一个很好的方法.本文详细记录了把社区版的HBase1.2.0源码导入idea中,进行编译调试的过程,以及在整个操作流程中遇到的一些坑. 一. ...
Hadoop源码篇--Reduce篇
一.前述 Reduce文件会从Mapper任务中拉取很多小文件,小文件内部有序,但是整体是没序的,Reduce会合并小文件,然后套个归并算法,变成一个整体有序的文件. 二.代码 ReduceTask源 ...
Hadoop源码分析(12)
Hadoop源码分析(12) 1. journalnode客户端在文档(11)中分析了初始化editlog的方法.在初始化之前其会根据集群的配置状态选择不同的方式来进行初始化.在HA状态下,其 ...
Hadoop源码分析（25）
Hadoop源码分析(25) ZKFC源码分析从文档(4)到文档(24),详细分析了namenode的启动流程.最后namenode会以standby模式启动.但在standby模式下的name ...
安装Hadoop系列 — 导入Hadoop源码项目
将Hadoop源码导入Eclipse有个最大好处就是通过 "ctrl + shift + r" 可以快速打开Hadoop源码文件. 第一步:在Eclipse新建一个Java项目,h ...
编译Hadoop源码
背景: 在阅读hadoop源代码过程中会发现部分类或者函数无法找到,这是由于Hadoop2.0使用了Protocol Buffers定义了RPC协议, 而这些Protocol Buffers文件在Ma ...
Hadoop源码导入Eclipse
需要进一步学习hadoop.需要看看内部源码实现,因此需要将hadoop源码导入都eclipse中,简单总结一下,具体步骤如下: 首先确保已经安装了git.maven3.protobuf2.5.如果没 ...

方法、hadoop源码之JobQueueTaskScheduler-by小雨

方法、hadoop源码之JobQueueTaskScheduler-by小雨相关推荐

最新文章

热门文章