b2c信息网

您现在的位置是:首页 > 前天新闻 > 正文

前天新闻

如何读spark源码(spark编程指南)

hacker2022-06-13 10:17:15前天新闻85
本文目录一览:1、《深入理解spark核心思想及源码分析》pdf下载在线阅读全文,求百度网盘云资源

本文目录一览:

《深入理解spark核心思想及源码分析》pdf下载在线阅读全文,求百度网盘云资源

《深入理解spark核心思想及源码分析》百度网盘pdf最新全集下载:

链接:

?pwd=df15 提取码:df15

简介:本书对Spark源代码进行了全面而深入的分析,旨在为Spark的优化、定制和扩展提供原理性的指导。阿里巴巴集团专家鼎力推荐,阿里巴巴资深Java开发和大数据专家撰写,Spark以其先进的设计理念,迅速成为社区的热门项目  

如何在idea中阅读 spark源代码

应该说这个和是不是Spark项目没什么关系。 建议你使用intellij idea,在spark目录下执行"sbt/sbt gen-idea",会自动生成.idea项目,导入即可。 idea我不熟,还需要做一些其他的插件配置(python, sbt等)和环境设置。 你也可以使用Eclipse看,Ecli...

《深入理解SPARK核心思想与源码分析》epub下载在线阅读,求百度网盘云资源

《深入理解SPARK》(耿嘉安)电子书网盘下载免费在线阅读

资源链接:

链接:

提取码:oeso

书名:深入理解SPARK

作者:耿嘉安

豆瓣评分:7.2

出版社:机械工业出版社

出版年份:2016-1-1

页数:469

内容简介:

《深入理解SPARK:核心思想与源码分析》结合大量图和示例,对Spark的架构、部署模式和工作模块的设计理念、实现源码与使用技巧进行了深入的剖析与解读。

《深入理解SPARK:核心思想与源码分析》一书对Spark1.2.0版本的源代码进行了全面而深入的分析,旨在为Spark的优化、定制和扩展提供原理性的指导。阿里巴巴集团专家鼎力推荐、阿里巴巴资深Java开发和大数据专家撰写。

本书分为三篇:

准备篇(第1~2章),介绍了Spark的环境搭建、设计理念与基本架构,帮助读者了解一些背景知识。

核心设计篇(第3~7章),着重讲解SparkContext的初始化、存储体系、任务提交与执行、计算引擎及部署模式的原理和源码分析。通过这部分的内容,读者可以通过源码剖析更加深入理解Spark的核心设计与实现,以便在实际使用中能够快速解决线上问题并对性能进行调优。

扩展篇(第8~11章),主要讲解基于Spark核心的各种扩展及应用,包括SQL处理引擎、Hive处理、流式计算框架Spark Streaming、图计算框架GraphX、机器学习库MLlib等内容。通过阅读这部分内容,读者可以扩展实际项目中对Spark的应用场景,让Spark焕发活力。

作者简介:

耿嘉安,10年IT行业相关经验。就职于阿里巴巴商家业务事业部,任资深Java工程师,专注于开源和大数据领域,目前与小伙伴们基于ODPS构建阿里的大数据商业解决方案——御膳房。在大量的工作实践中,对J2EE、JVM、Tomcat、Spring、Hadoop、Spark、MySQL、Redis都有深入研究,尤其喜欢剖析开源项目的源码实现。早期从事J2EE企业级应用开发,对Java相关技术有独到见解。业余时间喜欢研究中国古代历史,古诗词,旅游,足球等。

发表评论

评论列表

  • 北槐缪败(2022-06-13 12:30:11)回复取消回复

    些其他的插件配置(python, sbt等)和环境设置。 你也可以使用Eclipse看,Ecli...《深入理解SPARK核心思想与源码分析》epub下载在线阅读,求百度网盘云资源《深入理解SPARK》(耿嘉安)电子书网盘

  • 痛言好倦(2022-06-13 21:33:01)回复取消回复

    ark以其先进的设计理念,迅速成为社区的热门项目   如何在idea中阅读 spark源代码应该说这个和是不是Spark项目没什么关系。 建议你使用intellij idea,在spark目录下执