张包峰
查看新浪微博主页张包峰
#包包博文# 整理了三篇Spark Core源码分析文章: RDD基础http://t.cn/8sjTiCB、Spark任务模型http://t.cn/8sjY27n、Spark任务执行模型http://t.cn/8sjYR3t。梳理了Job -> Stages -> Tasks整个流程。主要包括DAGScheduler和TaskScheduler主流程,不包括Storage和Backend部分的细节。 展开全文原微博 张包峰
#包包博文# Run Spark on Mesos with Zookeeper. 面向对Spark,Mesos和Zookeeper有一点了解的读者,介绍下Run Spark on Mesos with Zookeeper的方法和一些注意点。因为Spark和Mesos的相关文档里,关于结合Zookeeper之后应该怎么改写相应URL和参数这块讲得不太清楚。🔗 网页链接 展开全文原微博