转载

OSC 第 69 期高手问答 — Spark 源码剖析

OSCHINA 本期高手问答 ( 4月20日- 4月26日) 我们请来了@eagleonline(许鹏)为大家解答关于 Apache Spark 方面的问题。

许鹏,长期致力于电信领域和互联网的软件研发,在数据处理方面积累了大量经验,对系统的可扩展性、可靠性方面进行过深入学习和研究。因此,累积了大量的源码阅读和分析的技巧与方法。目前在杭州同盾科技担任大数据平台架构师一职。对于Linux内核,作者也曾进行过深入的分析。

Spark 目前正在蓬勃发展,越来越多的公司把大数据计算任务迁移到 Spark 平台上来。Spark 开发的学习曲线并不陡峭。但是处理大数据,需要的不仅是逻辑正确的程序,还需要高性能的程序。如果想把 Spark 的性能挖掘到极致,那就需要深入了解Spark 的设计思想和运行机制,而要了解这些,没有比读源代码更直接的了。

为了鼓励踊跃提问,@博文视点 会在问答结束后从提问者中抽取 5 名幸运会员赠予《Apache Spark源码剖析》一书。

OSC 第 69 期高手问答 — Spark 源码剖析

购买链接: http://dwz.cn/DpRRK

OSChina高手问答一贯的风格,不欢迎任何与主题无关的讨论和喷子。

下面欢迎大家就 Apache Spark 方面问题向 @eagleonline (许鹏) 提问,请直接回帖提问。

正文到此结束
Loading...