在云中调度GPU以训练深度学习模型

shivank01

有人拥有自己的云VM实例来执行任务。目前,当我们想训练深度学习模型时,可以附加GPU。但是我一次只能使用1-2个GPU。因此,我想建立一种调度机制,一旦GPU释放,它将开始训练我的模型。我们该怎么做?一种解决方案可能是制作一个带有GPU的VM实例,然后我们从其他实例向该实例发送请求以安排我的工作。可行吗,怎么做?

马布布

如果要基于特定区域中GPU资源的可用性创建GPU实例,则用户没有这种可见性来观察GCP资源是否可用或缺货。

您可以在此处模拟服务帐户,从而在实例上计划cron作业,该实例将在具有GPU资源的实例上执行任务例如,您可以通过模拟实例的服务帐户,运行以下提到的命令在“ GPU_INSTANCE_NAME”实例上创建新文件。此时,创建一个包含以下提到的命令的脚本,并使用cron job根据您的要求安排任务。

“ gcloud computing ssh GPU_INSTANCE_NAME --project = Project_Name --zone = VM_Zone --impersonate-service-account = Instance_Service_Account --command =“ touch newfile””

本文收集自互联网,转载请注明来源。

如有侵权,请联系[email protected] 删除。

编辑于
0

我来说两句

0条评论
登录后参与评论

相关文章

来自分类Dev

使用 AMD 训练深度学习模型

来自分类Dev

在深度学习模型训练的中间修改学习率

来自分类Dev

如何在深度学习模型中训练不同尺度的特征

来自分类Dev

我的深度学习模型不是培训。我该如何训练?

来自分类Dev

Spacy在训练自定义模型时会使用哪种深度学习算法?

来自分类Dev

我无法在GPU上使用转移学习(VGG16)来训练模型

来自分类Dev

深度学习训练集的图像增强算法

来自分类Dev

如何让深度学习训练误差收敛?

来自分类Dev

如何训练深度学习网络

来自分类Dev

Numpy- 深度学习、训练示例

来自分类Dev

姿势网是机器学习模型还是深度学习模型

来自分类Dev

如何避免重新训练机器学习模型

来自分类Dev

深度学习模型权重的初始化

来自分类Dev

确定深度学习模型的最佳分类阈值

来自分类Dev

如何在云端部署深度学习模型?

来自分类Dev

人脸识别深度学习有哪些模型?

来自分类Dev

为什么在处理深度学习时 GPU 比 CPU 更重要?

来自分类Dev

转移学习:模型给出不变的损失结果。不训练吗?

来自分类Dev

训练基于个性化的机器学习模型

来自分类Dev

使用Celery或RESTful API服务深度学习模型?

来自分类Dev

复杂模式识别的深度学习模型

来自分类Dev

在两个 GPU 上训练两个模型

来自分类Dev

如何在本地 rtx gpu 的 tpu 上训练 keras 模型

来自分类Dev

多处理无法训练超过65536字节训练数据的Scikit学习模型

来自分类Dev

如何为深度学习训练数据集创建地面真相边界框?

来自分类Dev

模型的大小、深度和参数数量如何影响训练时间?

来自分类Dev

如何训练我的 DNNClassifier 模型(在 tensorflow 中),以从新的训练案例中学习?我无权访问初始 CSV 文件

来自分类Dev

是否有任何技术可以预先知道使深度学习获得良好表现所需的训练示例数量?

来自分类Dev

如何在机器学习中训练用于从图像中去除背景的模型

Related 相关文章

  1. 1

    使用 AMD 训练深度学习模型

  2. 2

    在深度学习模型训练的中间修改学习率

  3. 3

    如何在深度学习模型中训练不同尺度的特征

  4. 4

    我的深度学习模型不是培训。我该如何训练?

  5. 5

    Spacy在训练自定义模型时会使用哪种深度学习算法?

  6. 6

    我无法在GPU上使用转移学习(VGG16)来训练模型

  7. 7

    深度学习训练集的图像增强算法

  8. 8

    如何让深度学习训练误差收敛?

  9. 9

    如何训练深度学习网络

  10. 10

    Numpy- 深度学习、训练示例

  11. 11

    姿势网是机器学习模型还是深度学习模型

  12. 12

    如何避免重新训练机器学习模型

  13. 13

    深度学习模型权重的初始化

  14. 14

    确定深度学习模型的最佳分类阈值

  15. 15

    如何在云端部署深度学习模型?

  16. 16

    人脸识别深度学习有哪些模型?

  17. 17

    为什么在处理深度学习时 GPU 比 CPU 更重要?

  18. 18

    转移学习:模型给出不变的损失结果。不训练吗?

  19. 19

    训练基于个性化的机器学习模型

  20. 20

    使用Celery或RESTful API服务深度学习模型?

  21. 21

    复杂模式识别的深度学习模型

  22. 22

    在两个 GPU 上训练两个模型

  23. 23

    如何在本地 rtx gpu 的 tpu 上训练 keras 模型

  24. 24

    多处理无法训练超过65536字节训练数据的Scikit学习模型

  25. 25

    如何为深度学习训练数据集创建地面真相边界框?

  26. 26

    模型的大小、深度和参数数量如何影响训练时间?

  27. 27

    如何训练我的 DNNClassifier 模型(在 tensorflow 中),以从新的训练案例中学习?我无权访问初始 CSV 文件

  28. 28

    是否有任何技术可以预先知道使深度学习获得良好表现所需的训练示例数量?

  29. 29

    如何在机器学习中训练用于从图像中去除背景的模型

热门标签

归档