ECS-Blue/Green Deploy 0624

Transcript

1. ECS ネイティブの Blue/Green デプロイを攻略しよう 2026年6月24日 NRIネットコム株式会社 NTシステム事業二部 井手 亮太
2. 1 Copyright（C） NRI Netcom, Ltd. All rights reserved. 話すこと・話さないこと  話すこと  話さないこと 本日の発表内容 ECSネイティブの Blue/Green デプロイとは Blue/Green デプロイとは デプロイフローを組むうえで使用したツール・機能の説明 CodeDeploy⇒ECSネイティブ方式への移行 CodeDeploy 方式との違い  持ち帰っていただきたいこと ECSネイティブ方式の Blue/Green デプロイ が推奨されている理由 デプロイフローを組むためのツールや機能
3. 2 Copyright（C） NRI Netcom, Ltd. All rights reserved. 話すこと・話さないこと  話すこと  話さないこと 本日の発表内容 ECSネイティブの Blue/Green デプロイとは デプロイフローを組むうえで使用したツール・機能の説明 CodeDeployを使用したBlue/Green デプロイは↑を参照 CodeDeployからの移行は↑を参照 https://aws.amazon.com/jp/blogs/news/migrating-from-aws-codedeploy-to- amazon-ecs-for-blue-green-deployments/ https://tech.nri-net.com/entry/aws_ecs_deploy CodeDeploy 方式との違い Blue/Green デプロイとは CodeDeploy⇒ECSネイティブ方式への移行
4. 3 Copyright（C） NRI Netcom, Ltd. All rights reserved. 自己紹介 自己紹介 基本情報 井手 亮太（いで りょうた） 大学時代は宇宙物理学を専攻 AWSを中心としたシステム運用・構築 サッカー観戦が生きがいのエンジニア  執筆ブログ  保有資格 好きなAWS サービス Amazon Bedrock Amazon ECS
5. 4 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS ネイティブの Blue/Green デプロイとは
6. 5 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS ネイティブの Blue/Green デプロイとは ECS ネイティブの Blue/Green デプロイとは Amazon ECS 内で完結してBlue/Green デプロイを可能とする機能 これまで、ECS上で動作するアプリケーションのBlue/Green デプロイを実施するには CodeDeployを介する必要があった Amazon ECS AWS CodeDeploy
7. 6 Copyright（C） NRI Netcom, Ltd. All rights reserved. CodeDeploy 方式との比較
8. 7 Copyright（C） NRI Netcom, Ltd. All rights reserved. CodeDeploy 方式の Blue/Green デプロイ CodeDeploy 方式との比較  CodeDeploy で Blue/Green デプロイするために必要な設定 アプリケーション、デプロイグループ、appspec.yml 等を用意する必要があった ECS ネイティブ方式ではこれらのリソースが不要 AppSpec ファイルの例 - AWS CodeDeploy
9. 8 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS ネイティブの Blue/Green デプロイを使用するべき理由 CodeDeploy 方式との比較 サーキットブレイカー機能 が使える CodeDeploy を介す必要がなくなった以外にも様々なメリットがある Service Connect に対応 Blue・Green の紐づけが リスナールール単位に
10. 9 Copyright（C） NRI Netcom, Ltd. All rights reserved. Service Connect に対応 CodeDeploy 方式との比較 これまでは、ローリングアップデート のみの対応 Service Connect に対応 マイクロサービス化を実現する場合、機能ごとにECSサービスを分割することが考えられる ECSネイティブ方式では Blue/Green デプロイが可能に サービス間通信の一つとして、 Service Connect があった 改めてECSサービス間通信を整理する - NRIネットコムBlog より引用
11. 10 Copyright（C） NRI Netcom, Ltd. All rights reserved. サーキットブレイカー機能が使える CodeDeploy 方式との比較 v2  サーキットブレイカーとは デプロイ異常(コンテナ起動しない、ヘルスチェック失敗する等)あれば、自動ロールバックしてくれる機能 • CodeDeployによる Blue/Green デプロイ では、 サーキットブレイカーが使用不可 • 異常発生⇒即ロールバックを実現するには別途 CloudWatch アラーム、もしくはhook関数の実装が必要だった v1 v1 v1
12. 11 Copyright（C） NRI Netcom, Ltd. All rights reserved. リスナー単位からリスナールール単位に CodeDeploy 方式との比較 ポートだけではなく、パスやヘッダーで本番・テストトラフィックが切り替えられるようになった。
13. 12 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS ネイティブのBlue/Green デプロイの流れ
14. 13 Copyright（C） NRI Netcom, Ltd. All rights reserved. デプロイ前 ECS ネイティブの Blue/Green デプロイの流れ Blue Target Group Green Target Group テストリスナールール 本番リスナールール / でアクセス /test でアクセス 100 100 0 0 ALB Amazon ECS 本番・テスト用リスナールール それぞれに Blue・Green両方の ターゲットグループが紐づいている トラフィックの向き先は、ターゲット グループの「重みづけ」に基づく
15. 14 Copyright（C） NRI Netcom, Ltd. All rights reserved. テストトラフィック移行 ECS ネイティブの Blue/Green デプロイの流れ Blue Target Group Green Target Group テストリスナールール 本番リスナールール / でアクセス /test でアクセス 100 0 100 0 ALB Amazon ECS Green用ターゲットグループで タスクが起動 テスト用リスナールールの ターゲットグループの重みが変化
16. 15 Copyright（C） NRI Netcom, Ltd. All rights reserved. 本番トラフィック移行 ECS ネイティブの Blue/Green デプロイの流れ Blue Target Group Green Target Group テストリスナールール 本番リスナールール / でアクセス /test でアクセス 0 0 100 100 ALB Amazon ECS 本番用リスナールールの重みが変化 トラフィックがGreen環境に向く
17. 16 Copyright（C） NRI Netcom, Ltd. All rights reserved. Blue 環境のタスク削除 ECS ネイティブの Blue/Green デプロイの流れ Blue Target Group Green Target Group テストリスナールール 本番リスナールール / でアクセス /test でアクセス 0 0 100 100 ALB Amazon ECS ベイク時間経過後、Blue環境の タスクが削除される
18. 17 Copyright（C） NRI Netcom, Ltd. All rights reserved. デプロイフローを組んでみる
19. 18 Copyright（C） NRI Netcom, Ltd. All rights reserved. 全体構成図 デプロイフローを組んでみる • ECS サービス・タスクは ecspresso で管理 • それ以外のリソースは HCP Terraform で管理 • GitHub Actionsでデプロイ ecspresso ALB Service Task tfstate tfstateを参照 …etc デプロイ ECS Cluster push Lambda ECR
20. 19 Copyright（C） NRI Netcom, Ltd. All rights reserved. 全体構成図 デプロイフローを組んでみる 1. ecspresso とは 2. ecspresso とHCP Terraformの連携方法 3. Blue/Green デプロイ中のライフサイクル用 Lambda ecspresso ALB Service Task tfstate tfstateを参照 …etc デプロイ ECS Cluster push Lambda ECR ① ② ③
21. 20 Copyright（C） NRI Netcom, Ltd. All rights reserved. ecspresso とは デプロイフローを組んでみる ECS サービス・タスクのデプロイに特化したツール CI/CD ツールとの親和性 アプリ・インフラの責任範囲分離 AWS CloudFormation ecspresso アプリとインフラリソースでは更新サイクルが異なる ecspresso は IaC との連携が可能 CLI ベースで差分検出・デプロイ・ロールバックができるため、 自動化パイプラインとの統合が容易 Github アイコン: Logo - Brand Toolkit Jenkins : Artwork Terraform : HashiCorp Brand Guidelines - Product Logos
22. 21 Copyright（C） NRI Netcom, Ltd. All rights reserved. ecspresso とは デプロイフローを組んでみる  ecspresso の設定ファイルは 3つ ecspresso.yml：どのECSサービス・タスクを管理するのかを記した設定ファイル ecs-service.json ECSサービスの設定値を定義するファイル ecs-task-def.json タスク定義を記すファイル デプロイ手法の設定 ネットワーク設定(どのVPC？どのサブネット？どのALB？) CPU、メモリなどのスペック設定 コンテナイメージ・IAMロールの設定
23. 22 Copyright（C） NRI Netcom, Ltd. All rights reserved. ecspresso での Blue/Green デプロイ ECS Blue/Green デプロイフローを組んでみる ecs-service.json 内の deploymentConfiguration で設定 Blue Target Group Green Target Group テストリスナールール 本番リスナールール / でアクセス /test でアクセス 100 100 0 0 ALB Amazon ECS
24. 23 Copyright（C） NRI Netcom, Ltd. All rights reserved. ecspresso と HCP Terraform の連携 デプロイフローを組んでみる  ecspresso と HCP Terraform の連携方法 2. ecspresso.yml 内で tfstate プラグインを使用する 1. HCP Terraform で API Tokenを発行し、環境変数に登録 Manage API tokens for HCP Terraform | Terraform | HashiCorp Developer Add support Terraform Cloud / Terraform Enterprise by cohalz · Pull Request #30 · fujiwara/tfstate-lookup · GitHub HCP Terraform 上の tfstate を参照できるようになる urlには、HCP Terraform の Organizations、ワークスペース を入力する
25. 24 Copyright（C） NRI Netcom, Ltd. All rights reserved. Blue/Green デプロイあるある デプロイフローを組んでみる 本番トラフィックの向き先を変更する前に、十分な動作確認をしたい！！ 本番リスナールールのトラフィックが Green環境に向く前に動作確認をしたい
26. 25 Copyright（C） NRI Netcom, Ltd. All rights reserved. Blue/Green デプロイあるある デプロイフローを組んでみる 本番トラフィックの向き先を変更する前に、十分な動作確認をしたい！！ トラフィックの切り替わりは、自動的に実施される。 ⇒ デプロイを一時停止する仕組みが必要
27. 26 Copyright（C） NRI Netcom, Ltd. All rights reserved. 全体構成図(再掲) デプロイフローを組んでみる そこで登場するのが。。。ライフサイクルフックのLambda ecspresso ALB Service Task tfstate tfstateを参照 …etc デプロイ ECS Cluster push Lambda ECR
28. 27 Copyright（C） NRI Netcom, Ltd. All rights reserved. ライフサイクルフックとは デプロイフローを組んでみる  デプロイのプロセスを制御できる仕組みのこと デプロイ中の各ライフサイクルステージでLambdaを実行 レスポンス値によってデプロイのロールバック・一時停止・進行を制御
29. 28 Copyright（C） NRI Netcom, Ltd. All rights reserved. ライフサイクルフックとは デプロイフローを組んでみる  デプロイのプロセスを制御できる仕組みのこと デプロイ中の各ライフサイクルステージでLambdaを実行 レスポンス値によってデプロイのロールバック・一時停止・進行を制御 概要 HookStatus 30秒後にLambdaが再試行(秒数は変更可能) IN_PROGRESS デプロイが次のライフサイクルステージに向かう SUCCEEDED ロールバックされる FAILED
30. 29 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
31. 30 Copyright（C） NRI Netcom, Ltd. All rights reserved. デプロイ前 ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有) 本番・テスト用リスナールール それぞれに Blue・Green両方の ターゲットグループが紐づいている トラフィックの向き先は、ターゲット グループの「重みづけ」に基づく
32. 31 Copyright（C） NRI Netcom, Ltd. All rights reserved. ライフサイクルフック用のLambdaが起動し、 動作確認フェーズに入る Green用ターゲットグループで タスクが起動 テスト用リスナールールの ターゲットグループの重みが変化 テストトラフィック移行 ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
33. 32 Copyright（C） NRI Netcom, Ltd. All rights reserved. ライフサイクルフック用Lambdaは • ターゲットグループのステータス確認 • 承認ファイルの有無 を確認 デプロイワークフロー内で承認ステージになる 承認ステージ ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
34. 33 Copyright（C） NRI Netcom, Ltd. All rights reserved. HookStatus は以下の条件に基づき決定されるように実装 概要 条件 HookStatus 30秒後にLambdaが再試行 ターゲットグループのステータス が200～300 IN_PROGRESS デプロイが次のライフサイクルステー ジに向かう S3に承認ファイルがある＆ ターゲットグループのステータス が200～300 SUCCEEDED ロールバックされる それ以外 FAILED 承認ステージ ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
35. 34 Copyright（C） NRI Netcom, Ltd. All rights reserved. S3バケットに承認ファイルが存在しない Lambda は IN_PROGRESSを返し、 30秒後に Lambda が再試行 デプロイプロセスが一時中断され、 テストリスナールール経由の動作確認が可能 動作確認 ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
36. 35 Copyright（C） NRI Netcom, Ltd. All rights reserved. 動作確認が終了次第、承認。 S3 バケットに承認ファイルアップロード Lambda が 承認ファイルを検知し、 SUCCEEDED を返す デプロイプロセスが次のステージに移行 動作確認終了後 ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
37. 36 Copyright（C） NRI Netcom, Ltd. All rights reserved. 本番用リスナールールの重みが変化 トラフィックがGreen環境に向く 本番トラフィック移行 ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
38. 37 Copyright（C） NRI Netcom, Ltd. All rights reserved. ベイク時間経過後、Blue環境の タスクが削除される Blue 環境のタスク削除 ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有)
39. 38 Copyright（C） NRI Netcom, Ltd. All rights reserved. Lambda のロジックの考慮が必要 NatGateway のコストかかる 本番トラフィック移行 ECS ネイティブの Blue/Green デプロイの流れ(ライフサイクルフック有) 意外にメンドクサイ。。。
40. 39 Copyright（C） NRI Netcom, Ltd. All rights reserved. そこで新たな新機能
41. 40 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS デプロイ中の一時停止機能の導入 そこで新たな新機能 https://aws.amazon.com/jp/about-aws/whats-new/2026/05/amazon-ecs-pause-continue- deployments/
42. 41 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS デプロイ中の一時停止機能の導入 そこで新たな新機能  主な機能・特徴 1. Lambda 無しで、デプロイ一時停止ができるようになった 2. ライフサイクル Lambda との併用が可能 3. 中断時間のタイムアウトが、最大 14 日に (ライフサイクル Lambda は最大一日) 4. EventBridge との連携も可能 5. マネジメントコンソール、CLI、AWS SDK、Terraform 等で設定可能。(残念ながら ecspresso は 6/19時点で対応無し)
43. 42 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS デプロイ中の一時停止機能の導入 そこで新たな新機能  マネジメントコンソールで試してみた  ライフサイクルステージ  タイムアウト  タイムアウトアクション
44. 43 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS デプロイ中の一時停止機能の導入 そこで新たな新機能  ライフサイクルステージ ・・・ Green サービス開始前 ・・・本番トラフィックが Green サービスへルーティングした後 ・・・テストトラフィックが Green サービスへルーティングした後 ・・・本番トラフィック切り替え前 ・・・ Green サービスの起動が開始
45. 44 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS デプロイ中の一時停止機能の導入 そこで新たな新機能  タイムアウト・タイムアウトアクション 最大タイムアウト時間は、20,160 分(14 日) タイムアウトアクション • 続行：デプロイを次のライフサイクルステージに進める • ロールバック：ロールバックさせる
46. 45 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS デプロイ中の一時停止機能の導入 そこで新たな新機能  実際にデプロイやってみる
47. 46 Copyright（C） NRI Netcom, Ltd. All rights reserved. ECS デプロイ中の一時停止機能の導入 そこで新たな新機能  こんなこともできる  Lifecycle Lambda との組み合わせ Lifecycle Lambda 自動テスト検証 ガバナンス検証 Pause 機能 デプロイの承認機能
48. 47 Copyright（C） NRI Netcom, Ltd. All rights reserved. まとめ
49. 48 Copyright（C） NRI Netcom, Ltd. All rights reserved. 発表内容のまとめ まとめ  CodeDeploy 方式との比較 • Service Connect 、サーキットブレイカーの使用、Blue/Greenの紐づけがリスナールール単位になったため、柔軟性が高い • ただし、本番トラフィックの切り替えに関しては、CodeDeploy の方が容易  デプロイワークフロー構築 • アプリ・インフラの更新ライフサイクルの違い・責任範囲の明確化のためには ecspresso を使用するべき • ecspresso は HCP Terraform をはじめとした IaC との連携が可能 • ライフサイクルフック＋pause 機能でより柔軟な デプロイ方式が可能
50. 49 Copyright（C） NRI Netcom, Ltd. All rights reserved. 発表内容のまとめ まとめ  ブログも書いています！！ ECS Blue/Greenデプロイ攻略：ライフサイクルフックで本番切り替えを制御する (https://tech.nri-net.com/entry/ecsblue_green_deployment_strategy)