240 发简信
IP属地:浙江
  • Spark消息总线实现

    消息总线概述 消息总线是Spark内部进行消息传递,触发事件的框架,消息总线的核心是由三个抽象的对象组成: Event: 定义了一个事件; Li...

  • geomesa

    geomesa

  • 《文明之光》第二册读书笔记

    《文明之光》第二部用一句话概括起来就是在讲近代文明的出现与发展历程,主要从方法论的角度讲述了近现代科学、政治、军事思想的起源与发展,论述了其历史...

  • Resize,w 360,h 240
    RDD源码走读分析

    定义 RDD是Spark中最基本的抽象,官方的定义如下: A Resilient Distributed Dataset (RDD), the ...

  • Resize,w 360,h 240
    遥感卫星的分类及其特点

    人造卫星从用途上可以分为遥感卫星、通信卫星、侦查卫星、导航卫星、探测卫星等。其中遥感卫星是安装了遥感探测器,利用探测器获取远端对象电磁波信息的卫...

  • 系统性思考

    What:系统性思考是一种帮助我们聚焦目标导向、有条理做事情的一种思维方式。是一种思考的风格,帮助我们聚焦做减法,不要把时间浪费在不需要的、没有...

  • TaskScheduler

    Task: 在前面的章节中提到,一个Job由DAGScheduler划分后通常包含多个Stage,而一个Stage又是由多个Task组成, Ta...

  • Resize,w 360,h 240
    DAGScheduler源码分析

    简介 在RDD源码走读分析的例子中看到,通过RDD执行map和reduce方法即可计算数组元素的平方和,RDD的reduce方法最终调用了dag...

个人介绍
我始终相信,文字才是人类最伟大的发明,它让智慧得以传承,让穿越时空的思想与心灵得以交流碰撞,让美好的光景跃然纸上,这也许就是写作者的内在动力吧。