如何在hadoop YARN上运行spark-shell

Spark是一个开源的分布式计算框架，提供了高性能的集群计算。Spark支持多种编程语言，并且提供了一个交互式的控制台，可以使用spark-shell命令行来运行。

要在hadoop YARN上运行spark-shell，需要做以下几步：

1.首先，确保hadoop环境变量已经配置好，可以通过运行hadoop version命令来检查hadoop是否安装成功。

2.然后，下载spark安装包，解压缩后将spark目录添加到环境变量中。

3.接下来，需要修改spark的配置文件，在spark目录下的conf文件夹中，找到spark-defaults.conf文件，修改spark.master的值为yarn。

4.最后，运行spark-shell命令即可在hadoop YARN上启动spark-shell。