第一天:spark和Hadoop的比较和介绍

spark能替代hadoop么?


从截图中可以看到整个hadoop的架构,Spark只能替代Hadoop的一部分,也就是MapReduce,和Hive查询引擎,spark身是不提供大数据的存储的!

spark VS hadoop计算过程

spark 整体架构

spark 的特点

spark SQL 和Hive

spark streaming VS storm

spark的个人使用体会

推荐阅读更多精彩内容

  • Spark是什么? Spark,是一种通用的大数据计算框架,正如传统大数据技术Hadoop的MapReduce、H...
    义焃阅读 437评论 0 5
  • Zookeeper用于集群主备切换。 YARN让集群具备更好的扩展性。 Spark没有存储能力。 Spark的Ma...
    Alonzo阅读 5,677评论 0 32
  • 1 Spark设计目的 设计的目的就是能快速处理多种场景下的大数据问题,能高效挖掘大数据中的价值,从而为业务发展提...
    小小少年Boy阅读 521评论 0 5
  • 课程一、大数据运维之Linux基础本部分是基础课程,帮大家进入大数据领域打好Linux基础,以便更好地学习Hado...
    101之歌阅读 630评论 0 2
  • 我该走了
    幸运的贝壳阅读 66评论 0 0