如何强制 AWS ECS 将容器迁移到另一个 ASG？

Question

我正在使用 user_data 对 ECS 中用于运行容器的主机进行初始配置。一旦我更新 user_data，我希望能够告诉 AWS ECS 将容器迁移到新创建的主机。我该怎么做？

我正在使用 Terraform 进行 AWS 基础设施部署。

Answer 1

我认为 ECS 没有内置的方法来执行此操作。因此，它通常需要一个相当繁琐的手动过程（尽管可以编写脚本）。有几种不同的方法可以做到这一点，但这通常是最简单的一种：

1. 更改为user_data。
2. 运行terraform apply。
3. 对于您的 ASG 中每个具有旧 user_data 的 EC2 实例：
   1. 终止该 EC2 实例。您可以通过 AWS CLI 或 EC2 Web 控制台执行此操作。
   2. 稍后，ASG 将使用您的新user_data 自动启动一个新的 EC2 实例，以替换已终止的 EC2 实例。
   3. 稍后，ECS 将自动启动恰好在终止的 EC2 实例上运行的任何 ECS 任务的新副本。

完成此过程后，ASG 中的所有实例都将运行新的user_data。请注意，这可以通过 ECS 任务的零停机时间来完成，只要：

1. 每个 ECS 任务至少有 2 个副本，每个副本位于 ASG 中的单独 EC2 实例上。
2. 您在终止 EC2 实例之间等待足够的时间以重新启动 ECS 任务。

如果您无法满足这些要求，那么您可能会遇到一些停机时间，或者您可能需要采用更混乱的选择，包括将 ASG 的大小增加一倍，等待新的 EC2 实例（它将具有新的 @ 987654326@) 在 ASG 中部署，将 ECS 任务的数量增加一倍，等待那些新的 ECS 任务部署（它们通常会部署到新的 EC2 实例上），然后再将每个任务减少一半（理论上，旧的 ECS任务和旧的 EC2 实例将被终止，只留下新的）。

Answer 2

虽然Yevgeniy 的answer 是正确的，但如果重新创建实例，则无法让 Terraform 直接将容器迁移到新实例，但使用 Terraform 的资源@987654323 可以使用更简洁的选项@。

假设您使用自动缩放组来支持您的 ECS 主机，您可以执行以下操作：

data "aws_ami" "ubuntu" {
  most_recent = true
  filter {
    name = "name"
    values = ["ubuntu/images/ebs/ubuntu-trusty-14.04-amd64-server-*"]
  }
  filter {
    name = "virtualization-type"
    values = ["paravirtual"]
  }
  owners = ["099720109477"] # Canonical
}

resource "aws_launch_configuration" "as_conf" {
  name_prefix = "terraform-lc-example-"
  image_id = "${data.aws_ami.ubuntu.id}"
  instance_type = "t1.micro"

  lifecycle {
    create_before_destroy = true
  }
}

resource "aws_autoscaling_group" "bar" {
  name = "${aws_launch_configuration.as_conf.name}"
  launch_configuration = "${aws_launch_configuration.as_conf.name}"

  lifecycle {
    create_before_destroy = true
  }
}

（取自 Terraform 的 launch configuration docs）

现在，当启动配置发生变化时，例如，如果用户数据或所使用的 AMI 发生变化，这将强制 Terraform 创建一个新的启动配置，由于对名称的依赖，这反过来又会强制一个新的自动缩放组.

由于 Terraform 使用 create_before_destroy 生命周期配置，它将在销毁之前创建新的启动配置和 ASG。在上述简单设置中，只要 AWS 认为单个实例健康，ASG 就会在完成后返回。

不幸的是，这只显示 EC2 实例何时运行良好，而不是它成功运行任务。正如该答案的 cmets 中所述，ECS 不会将任务自动平衡到集群中的新实例，因此 Terraform 将在 ECS 将它们重新调度到新 ASG 实例之前销毁在旧 ASG 中运行 ECS 任务的实例，从而导致停电。

要解决这个问题（并且还允许实例失败并以更好的方式被替换），您可以使用ASG lifecycle hooks 在实例被标记为终止但在它实际终止之前执行一些操作。

有一个很好的AWS blog post 正是这样做的，并且有一些 [示例 Lambda 代码] 响应钩子以在完成生命周期钩子之前耗尽标记为终止的容器实例，这将允许 ASG 终止实例。耗尽容器实例后，ECS 会自动将最少数量的健康任务重新调度到非耗尽实例（在新的 ASG 中）。

如果您的 ECS 任务已注册到负载均衡器，则一旦新的任务集运行，ECS 将从负载均衡器取消注册任务，然后这些任务将在负载均衡器的连接耗尽超时期间保留。