前方高能，减速慢行！ 看过了Spark的核心RDD和RDD算子以后，感觉Spark是不是很神奇，竟然可以减少计算次数，优化计算。对于窄依赖是这样...
投稿
收录了9篇文章 · 16人关注
-
Spark盖中盖（一篇顶五篇）-3 DAG详解 -
Spark盖中盖（一篇顶五篇）-1 RDD的数据结构模型前言：自Google发表三大论文GFS、MapReduce、BigTable以来，衍生出的开源框架越来越多，其中Hadoop更是以高可用、高扩展...
-
spark源码中为什么有java scala python代码
新手很迷茫的一个问题，spark源码中为什么有java scala python代码 当看过源码就会发现，spark框架虽然是scala实现的，...
-
spark master和spark worker挂掉application恢复问题
首先分5中情况： 1，spark master进程挂掉了 2，spark master在执行中挂掉了 3，spark worker提交任务前全部...
-
spark源码调试Debug环境搭建运行环境 java 1.8 scala 2.11.0 maven 3.3.9 idea 2016 spark 2.0.2 1完成以下配置 jav...
-
谁将是MapReduce的继承人We’ve pointed out that [Apache Spark and Hadoop MapReduce] are two diffe...
-
Spark start all 启动前言：通过启动脚本日志很容易找到spark部署的问题。 spark启动脚本如图（standalone模式）： 运行start all 脚本加载 ...
-
spark mllib支持哪些机器学习算法？
Spark 2.1 Mllib考虑到spark选型做mllib的人，最关心问题，就是spark mllib能够支持多少机器学习的算法呢？问题很简...
专题公告
spark涉及领域学习，spark源码，spark SQL and Dataframes，spark MLlib,spark streaming,spark Graphx.
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/319006/spark_850x500.jpg', '推荐专题《spark》（ 分享自 @简书 ）','https://www.jianshu.com/c/aefc51677433?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','页面编码gb2312|utf-8默认gb2312'));){kind=link}