探索Hadoop YARN:架构与实现深度解析
![](https://csdnimg.cn/release/wenkucmsfe/public/img/starY.0159711c.png)
《Hadoop技术内幕: 深入解析YARN架构设计与实现原理》是由董西成编著的一本深度剖析Hadoop 2.0版本YARN架构的专业书籍。作为“Hadoop技术内幕”系列的第三部作品,它延续了作者在前两本著作中对HDFS和MapReduce的深入讲解,并且针对YARN这一核心组件提供了全面而详尽的介绍。
本书分为四大部分共13章,旨在从应用实战和源代码分析两个维度来理解和掌握YARN。在第一部分(第1-2章),读者可以学习到如何获取、阅读和调试Hadoop源代码,以及YARN的设计理念、基本架构和工作流程。这部分对于理解YARN在分布式计算中的核心地位至关重要。
第二部分(第3-7章)深入剖析了YARN的第三方开源库、底层通信库、服务库和事件库的使用方法,以及 ResourceManager、资源调度器和NodeManager等关键组件的实现细节,通过源代码解析,帮助读者洞察其内部运作机制。
第三部分(第8-10章)集中讲解了YARN上流行的计算框架,包括MapReduce、Tez(DAG计算框架)、Storm(实时计算框架)和Spark(内存计算框架),这些框架的详细讲解有助于开发者选择合适的工具进行大规模数据处理。
最后部分(第11-13章)讨论了类YARN的开源资源管理系统如Facebook的Corona和Apache Mesos,以及对未来YARN发展趋势的展望。附录中还提供了实用的安装指南、配置参数列表以及HadoopShell命令参考,便于读者在实际项目中灵活运用。
《Hadoop技术内幕: 深入解析YARN架构设计与实现原理》是一本既适合Hadoop初学者了解YARN基础知识,又适合经验丰富的开发人员深入研究和优化YARN性能的实用指南。通过阅读本书,读者能够全面理解YARN在Hadoop生态系统中的角色,并提升自己的大数据处理能力。
2018-05-10 上传
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
点击了解资源详情
![](https://profile-avatar.csdnimg.cn/91fb185aa902447088b041105dc00697_u011642663.jpg!1)
LieBrother
- 粉丝: 1084
- 资源: 58
最新资源
- 多模态联合稀疏表示在视频目标跟踪中的应用
- Kubernetes资源管控与Gardener开源软件实践解析
- MPI集群监控与负载平衡策略
- 自动化PHP安全漏洞检测:静态代码分析与数据流方法
- 青苔数据CEO程永:技术生态与阿里云开放创新
- 制造业转型: HyperX引领企业上云策略
- 赵维五分享:航空工业电子采购上云实战与运维策略
- 单片机控制的LED点阵显示屏设计及其实现
- 驻云科技李俊涛:AI驱动的云上服务新趋势与挑战
- 6LoWPAN物联网边界路由器:设计与实现
- 猩便利工程师仲小玉:Terraform云资源管理最佳实践与团队协作
- 类差分度改进的互信息特征选择提升文本分类性能
- VERITAS与阿里云合作的混合云转型与数据保护方案
- 云制造中的生产线仿真模型设计与虚拟化研究
- 汪洋在PostgresChina2018分享:高可用 PostgreSQL 工具与架构设计
- 2018 PostgresChina大会:阿里云时空引擎Ganos在PostgreSQL中的创新应用与多模型存储