240 发简信
IP属地:上海
  • Java JIT(编译器)

    概念 JVM在解释执行字节码的过程中会收集代码块或方法的执行频率用于判断该代码块或方法是否为热点代码,如果被判定为热点代码则这些代码在运行时会被...

  • Resize,w 360,h 240
    Spark Shuffle(ExternalSorter)

    1、Shuffle流程 spark的shuffle过程如下图所示,和mapreduce中的类似,但在spark2.0及之后的版本中只存在Sort...

  • Spark Task

    Task Locality Data locality can have a major impact on the performance o...

  • Spark Stage

    概念 A stage is a set of parallel tasks ① all computing the same function ...

  • spark core 相关概念简述

    Job spark中对RDD的操作类型分为transformation和action,其中transformation是一种延迟执行的操作,并不...