如何使用 Docker 卷作为 Mesos/Marathon 的持久卷？

Question

我在 CoreOS 上运行 Mesos 和 Ceph 集群，Ceph RBD Docker volume plugin 工作正常，但我不清楚如何将其与 Mesos/Marathon 一起使用...为单个 Docker 容器创建/使用 rbd 卷是但工作完美无瑕。

我找不到任何文章/博客文章/任何涉及通过 Marathon 自动创建这些卷的文章/博客文章（以及，在 Mesos 从属之间“任务迁移”的情况下，重新映射）。对我来说特别重要的是当每个实例都需要有自己的卷时如何运行有状态服务的多个实例（想象一下MongoDB ReplicaSet on Mesos/Marathon）。

我知道Mesos persistent volume docs，我也看到了Marathon issue，但我仍然很困惑如何或何时可以使用...

还有其他关于SO的问题：

• How to use volumes-from in marathon
• Docker on Mesos: Volume is placed on which node?
• Docker volume plugin marathon

不幸的是，它并没有真正解决这个特定问题。

RexRay 的EMC Code 示例也仅涵盖了单个实例示例，我也可以使用上面提到的音量插件轻松处理：

{
    "id": "nginx",
    "container": {
        "docker": {
            "image": "million12/nginx",
            "network": "BRIDGE",
            "portMappings": [{
                "containerPort": 80,
                "hostPort": 0,
                "protocol": "tcp"
            }],
            "parameters": [{
                "key": "volume-driver",
                "value": "rbd"
            }, {
                "key": "volume",
                "value": "nginx-data:/data/www"
            }]
        }
    },
    "cpus": 0.2,
    "mem": 32.0,
    "instances": 1
}

在这种情况下会自动创建nginx-data 卷。但是如果我想使用持久卷和多个实例怎么办？

Answer 1

这是 Flocker 旨在解决的一个用例。 （免责声明：我是 ClusterHQ 的 CTO）。有关 Flocker Mesos/Marathon 交互的演示，请参阅 this blog post，该演示展示了 Flocker 控制服务如何充当集群设置中存在容器卷的“事实来源”。 Flocker 然后将按需创建，然后在主机之间协调映射和取消映射这些卷，因为引用这些卷的容器在集群中移动。

Flocker 通过提供集群范围的卷名称命名空间来做到这一点，然后这些名称可以通过用于 Docker 的 Flocker 插件与 Marathon 一起使用，从而为 Mesos 集群中的有状态容器提供可移植性和高可用性。

Flocker 还有一个 Ceph 驱动程序：

• Google“Flocker Ceph 驱动程序”

适用于 CoreOS：

• Google“Flocker on CoreOS 演示”

您可以通过为每个容器提供自己的卷名（例如mongo_1、mongo_2 等）来运行多实例作业（例如具有副本集的 MongoDB）。

将这些部分组合在一起并非易事，但我很乐意提供帮助。如果您愿意，我可以专门为您的堆栈（Ceph + CoreOS + Docker + Mesos + Marathon）编写详细指南。