【问题标题】:What sagemaker algorithm can be trained by the minimal instance?最小实例可以训练什么 sagemaker 算法?
【发布时间】:2020-11-08 17:12:44
【问题描述】:
我正在关注this example,了解如何在 Amazon-sagemaker 中训练机器学习模型。问题是 ml.t2.medium 实例无法满足 K-means 算法的约束。我不能使用满足算法约束的实例(我会请求支持分配此资源)。我的问题是 sagemaker 是否有任何算法可以用最少的实例在 MNIST 数据集上进行训练?
【问题讨论】:
标签:
amazon-web-services
jupyter-notebook
instance
amazon-sagemaker
【解决方案1】:
编辑
在浏览 pricing 时注意到,用于训练的最小大小是 ml.m5.large,因此您需要查看这些以确定要使用的实例类型。
AWS 确实在其免费套餐中提供“50 小时的 m4.xlarge 或 m5.xlarge 培训”。
原创
这归结为多种因素。
我不知道基于算法的任何具体限制,事实上 AWS 在 this page 上推荐通用实例系列,使用 k-means 算法,这是针对基于 CPU 或 GPU 的实例(因此它并不完全需要 GPU) .
文档中有一个available instance types 列表没有提及您所指的实例类型,我建议您尝试改用ml.t3.medium 实例类型。这是新一代算法,可能会在当前版本的算法中得到更多支持。
【讨论】:
-
-
-
" 每月免费套餐 250 小时 t2.medium 或 t3.medium 笔记本用于构建模型,外加 50 小时 m4.xlarge 或 m5.xlarge 用于训练,外加 125 小时 m4。 xlarge 或 m5.xlarge ”。因此,您每月可以使用 50 小时的 m4.xlarge 或 m5.xlarge。 aws.amazon.com/sagemaker/pricing