社区支持的集群管理器

注意

如果您使用 AWS、Azure、GCP 或 vSphere，您可以使用 Ray 集群启动器 来简化集群的设置过程。

以下是社区支持的集群管理器列表。

• 在 YARN 上部署
  • Skein 配置
  • 打包依赖项
  • Ray 在 YARN 上的设置
  • 运行作业
  • 清理
  • 有问题或疑问？
• 在 Slurm 上部署
  • 使用 Ray 和 SLURM 的演练
  • Python 接口 SLURM 脚本
  • 示例和模板
• 在 LSF 上部署
• 在 Spark 独立集群上部署
  • 运行基本示例
  • 在 Spark 集群上创建长期运行的 Ray 集群
  • Spark 上的 Ray API

使用自定义云或集群管理器

Ray 集群启动器目前支持 AWS、Azure、GCP、阿里云、vSphere 和 KubeRay。要在其他云提供商或集群管理器上使用 Ray 集群启动器和自动伸缩器，您可以实现 node_provider.py 接口（100 行代码）。实现 node provider 后，您可以在集群启动器配置的 provider 部分 中注册它。

provider:
  type: "external"
  module: "my.module.MyCustomNodeProvider"

您可以参考 AWSNodeProvider、KubeRayNodeProvider 和

LocalNodeProvider 以获取更多示例。