spark on yarn跟on docker有什么区别

spark on yarn跟on docker有什么区别

spark on yarn和on docker的主要区别在于部署方式不同。spark on yarn是将spark部署在yarn上的一种方式，而on docker则是将spark部署在docker上的一种方式。

spark on yarn的优点在于可以充分利用yarn的资源管理功能，同时也能够很好地与yarn集成。spark on yarn的缺点在于需要额外的配置，并且需要使用yarn的命令行工具来提交spark任务。

on docker的优点在于可以很方便地将spark部署在docker上，同时也不需要额外的配置。on docker的缺点在于需要使用docker的命令行工具来提交spark任务，并且需要将spark任务提交到容器中运行。