240 发简信
IP属地:安徽
  • 《超越感觉》读后感

    超越感觉,是一本经典著作。从1975年出版,长达几十年的时间一直再版,截止到2017年末已经到了第九版第2次出版。 这本书的副标...

  • Resize,w 360,h 240
    spark之shuffle原理及性能优化

    1.spark的shuffleManager是负责shuffle过程的执行、计算和处理的组件。shuffleManager是trait,主要实现...

  • 在码云上新建git库并提交idea的项目代码

    1.登录码云:https://git.oschina.net/ 并新建git库,并复制git库地址,如:https://git.oschina....

  • spark的Driver获得资源的过程(standalone模式)

    1. 在SparkContext实例化的时候调用createTaskScheduler来创建TaskSchedulerImpl和SparkDep...

  • spark概念理解

    1. Application:Spark 的应用程序,用户提交后,Spark为App分配资源,将程序转换并执行,其中Application包含一...

  • spark比hadoop快的原因

    Spark SQL比Hadoop Hive快,是有一定条件的,而且不是Spark SQL的引擎比Hive的引擎快,相反,Hive的HQL引擎还比...