用户张包峰的头像

张包峰

查看新浪微博主页
  • 用户头像

    张包峰

    #包包博文# 整理了三篇Spark Core源码分析文章: RDD基础http://t.cn/8sjTiCB、Spark任务模型http://t.cn/8sjY27n、Spark任务执行模型http://t.cn/8sjYR3t。梳理了Job -> Stages -> Tasks整个流程。主要包括DAGScheduler和TaskScheduler主流程,不包括Storage和Backend部分的细节。
    展开全文
    原微博
  • 用户头像

    张包峰

    #包包博文# Run Spark on Mesos with Zookeeper. 面向对Spark,Mesos和Zookeeper有一点了解的读者,介绍下Run Spark on Mesos with Zookeeper的方法和一些注意点。因为Spark和Mesos的相关文档里,关于结合Zookeeper之后应该怎么改写相应URL和参数这块讲得不太清楚。🔗 网页链接
    展开全文
    原微博