240 发简信
IP属地:贵州
  • RoketMQ日志原理

    RoketMQ日志代码所在的子工程为rocketmq-logging,该子工程完成以下几个功能 rocketmq实现了一套简易的内部日志接口,通...

  • YARN中的抢占机制

    关于抢占机制的说明及其源码分析https://blog.csdn.net/zhanyuanlin/article/details/7151628...

  • FairScheduler中Fair Share计算方法

    本文调度算法所采用的策略是fair策略,即公平调度算法,另外为简单起见本文只考虑了一个资源即memory. Schedulable接口 调度器调...

  • Resize,w 360,h 240
    FairScheduler中Queue管理

    FairScheduler的资源分配第一层调度的对象是FSQueue,即资源的分配都是在队列中完成的。队列抽象类FSQueue包含FSParen...

  • YARN中的资源预约机制

    概念 YARN的资源预约机制是一种资源保证机制,当应用程序申请的资源无法得到满足的时候,YARN会将当前的资源预约到一个node上,未来只要有一...

  • FifoScheduler分配容器的过程

    FifoScheduler相对FairScheduler来说很简单了,先从这个入手窥探YARN容器分配的基本过程。FifoScheduler只包...

  • Hadoop YARN资源调度中的relaxLocality属性

    YARN中的资源请求主要是指ApplicationMaster通过AMRMClientImpl向ResourceManager发起的容器请求。r...

  • Hadoop机架感知

    Hadoop提供了机架(rack)的概念,Hadoop集群上面的一个node属于哪一个rack,rack信息由网络管理员配置。Hadoop提供机...

  • YARN中NodeManager资源下载的过程

    ApplicationMaster提交startContianers的请求给NodeManager之后,NodeManager很重要的一个步骤是...