240 发简信
IP属地:北京
  • 对Spark的一些误解[翻译自Spark Misconceptions]

    原文链接<https://0x0fff.com/spark-misconceptions/> Spark Misconceptions 目前,媒...

  • sudo apt-get:command not found Fix - Ubuntu 18.04

    apt/apt-get command找不到-问题修复 最近使用ubuntu 18.04时,因为按照某些软件包导致apt/apt-get命令找不...

  • Spark-Task

    Spark Task Define of Task Task是Spark中执行具体计算任务的基本单位(a unit of execution),...

  • Resize,w 360,h 240
    Spark-Mesos架构图

    Spark Mesos 架构图 Apache Mesos采用Master/Slave架构,主要由Mesos Master、Mesos Slave...

  • spark-local模式详解

    spark-local 详解 Spark的Local模式是在本地启动多个Threads(线程)来模拟分布式运行模式,每个Thread代表一个wo...

  • Resize,w 360,h 240
    Intel-BigDL 训练过程(DistriOptimize)详解

    Intel-BigDL DistriOptimizer内部过程分析 Intel深度学习库BigDL在分布式模式下进行Model的训练是非常简单的...

  • Resize,w 360,h 240
    理解Spark中Job-Stage-Task之间的关系

    Spark-Job-Stage-Task之间的关系 基本概念 在开始之前需要先了解Spark中Application,Job,Stage等基本概...

  • Resize,w 360,h 240
    JVM类加载机制

    虚拟机类加载机制 类从被加载到虚拟机内存开始到卸载出内存为止,整个生命周期包含以下7个阶段,其中验证,准备,解析3个阶段被统称为连接。7个阶段中...

  • Spark RDD详解

    SparkRDD 在Spark中RDD具有5个主要的属性: A list of partitions A function(compute) t...