介绍
你好。我是来自 NetApp LLC 专家 SE 的 Tsukioka。
我们将分 4 部分提供“使用 Amazon SageMaker 和 Amazon FSx for NetApp ONTAP 实现的机器学习基础设施”。
你读过第一篇和第二篇文章吗?
如果你还没有看过,请看一下。
- 第一篇:https://qiita.com/Yoshinori_Tsukioka/items/e02537feb8008db46a99
- 第2条:https://qiita.com/Yoshinori_Tsukioka/items/0bdb5162f2ee25c82f32
我试过了
这次,(3) 安装 NetApp DataOps Toolkit 并创建 NFS Volume Snapshot/FlexClone我想试一试
① 为 NetApp ONTAP 创建 Amazon FSx 并为 Notebook 实例创建 NFS 卷
② 创建Notebook实例并挂载NFS Volume
(3) 安装 NetApp DataOps Toolkit 并创建 NFS Volume Snapshot/FlexClone
(4) 通过生命周期设置自动挂载 NFS Volume/自动安装 NetApp DataOps Toolkit 即使在重启后
什么是 NetApp DataOps 工具包?
使用 NetApp ONTAP 为存储提供的 Python 库。
通过使用 NetApp DataOps Toolkit,数据科学家和数据工程师可以轻松操作创建和复制 NetApp 存储卷以及获取快照等流程。
由于它发布在 GitHub 上,因此任何人都可以使用它。
https://github.com/NetApp/netapp-dataops-toolkit
安装 NetApp DataOps Toolkit 并创建 NFS 卷快照/FlexClone
在您的 Jupyter Notebook 实例上安装 NetApp DataOps Toolkit。
-
安装 NetApp DataOps 工具包。 (netapp-dataops-传统)
安装方法和可用命令发布在 GitHub 上。
https://github.com/NetApp/netapp-dataops-toolkit/tree/main/netapp_dataops_traditional -
确保已安装 NetApp DataOps Toolkit。
-
为 NetApp DataOps Toolkit 设置配置。
此时,建议为“ONTAP 管理 LIF 主机名或 IP 地址”指定存储虚拟机的管理 IP 地址,为 ONTAP API 用户名/密码指定存储虚拟机用户 (vsadmin)。
使用 NetApp DataOps Toolkit 尝试卷操作。
-
尝试获取 Amazon FSx for NetApp ONTAP 的卷列表。
-
尝试克隆 NFS 卷。 (来源:vol1,目的地:vol1_clone)
-
将克隆的卷挂载到 Amazon SageMaker Jupyter Notebook 实例。
现在,您可以使用 NetApp DataOps Toolkit 在 Amazon FSx for NetApp ONTAP 中操作卷。
使用 Jupyter Notebook 实例的工程师可以复制存储数据集和脚本的卷,并使用快照管理版本。
下次预览
终于到了最后一集的时间了。
我们将介绍 Amazon SageMaker 生命周期设置,并确认在重新启动或创建生产中发生的 Jupyter Notebook 实例时可以自动挂载 NFS Volume / NetApp DataOps Toolkit 可以自动安装。
主要推荐人
- https://aws.amazon.com/jp/sagemaker/
- https://aws.amazon.com/jp/fsx/netapp-ontap/
- https://docs.aws.amazon.com/fsx/latest/ONTAPGuide/what-is-fsx-ontap.html
- https://aws.amazon.com/jp/blogs/news/customize-your-notebook-volume-size-up-to-16-tb-with-amazon-sagemaker/
- https://github.com/NetApp/netapp-dataops-toolkit
- https://github.com/NetApp/netapp-dataops-toolkit/tree/main/netapp_dataops_traditional
原创声明:本文系作者授权爱码网发表,未经许可,不得转载;
原文地址:https://www.likecs.com/show-308628172.html