YARN集群工作机制是什么

2023-04-07 02:43:00 集群 yarn 工作机制

YARN集群工作机制是什么

YARN集群是一种分布式资源管理器,它可以将一台服务器上的计算资源分配给各个应用程序。它的工作原理是通过一个主节点将计算资源分配给多个工作节点,这些工作节点可以是物理机或者虚拟机。每个工作节点都运行着一个资源管理器(ResourceManager),负责管理该节点上的计算资源。

当应用程序向YARN集群提交作业时,主节点的资源管理器会将作业分配给其中一个工作节点。工作节点的资源管理器会将作业分配给该节点上的一个或多个虚拟机(Container)。每个虚拟机都可以运行一个或多个应用程序。应用程序可以使用YARN集群提供的计算资源,包括CPU、内存、磁盘空间等。

YARN集群的优势在于,它可以将一台服务器上的计算资源分配给多个应用程序,使得应用程序可以充分利用服务器的计算资源。此外,YARN集群还具有良好的扩展性,可以通过增加工作节点的数量来扩展集群的计算资源。

相关文章