揭秘Apache Hadoop YARN,第三部分:调度概念
在第1部分和第2部分,我们详情了YARN资源分配的基础知识。在本部分中,我们将提供集群调度的概述,并详情Fair Scheduler,YARN提供的一个调度程序。
独立的计算机可以有多个CPU核心,每个核心运行一个进程,但是可以有多达几百个进程同时运行。调度程序是操作系统的一部分,将进程分配给一个CPU 内核执行。
如先前在第1部分:集群和YARN基础中所述,应用程序由群集上的多个任务(通常在不同的主机上)组成。集群调度程序必需解决以下问题:
- 多租户:在集群上,许多客户代表多个客户组启动许多不同的应用程序。集群调度程序允许不同的工作负载同时运行。
- 可扩展性:集群调度程序需要扩展到运行许多应用程序的大型集群。这意味着添加集群的大小应该提高整体性能,而不会对系统推迟产生负面影响

说明
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » 揭秘Apache Hadoop YARN,第三部分:调度概念
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,您必须在下载后24小时内删除!
3. 不得使用于非法商业用途,不得违反国家法律。否则后果自负!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是摆设,本站源码仅提供给会员学习使用!
7. 如遇到加密压缩包,请使用360解压,如遇到无法解压的请联系管理员
开心源码网 » 揭秘Apache Hadoop YARN,第三部分:调度概念