在EMR上部署storm on yarn的详细步骤

2023-04-16 13:06:00 部署 步骤 详细

在EMR上部署Storm on Yarn的步骤如下:

1.在EMR控制台上创建集群,并选择Storm on Yarn作为安装选项。在EMR上,Storm on Yarn是通过Apache Bigtop来安装的,因此我们需要选择Bigtop作为安装选项,并勾选Storm on Yarn复选框。

2.接下来,我们需要指定集群的配置,可以指定实例类型、实例数量、存储大小等,以及指定Storm on Yarn的配置,包括Yarn的资源分配模式、Storm的节点数量等。

3.在集群创建完成后,我们需要使用SSH登录到集群的管理节点,然后使用Storm on Yarn命令来启动Storm on Yarn。

4.在Storm on Yarn启动后,我们可以使用Storm UI来查看Storm on Yarn集群的状态,并且可以使用Storm命令来提交Topology到集群中。

5.最后,我们可以使用Yarn命令来查看Storm on Yarn的资源使用情况,以及查看Topology的运行情况。

相关文章