Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
(今更ながら)AWSのコンテナサービスについてざっくりまとめてみる
Search
つくぼし
November 09, 2022
Technology
1
2.3k
(今更ながら)AWSのコンテナサービスについてざっくりまとめてみる
つくぼし
November 09, 2022
Tweet
Share
More Decks by つくぼし
See All by つくぼし
Mastraに入門してみた ~AWS CDKを添えて~
tsukuboshi
0
550
Amazon Bedrock GenUハンズオン座学資料 #2 GenU環境でRAGを体験してみよう
tsukuboshi
0
270
Amazon Bedrock GenUハンズオン座学資料 #1 GenU環境で生成AIを体験してみよう
tsukuboshi
0
650
AWSエンジニアに捧ぐLangChainの歩き方
tsukuboshi
4
1.3k
世界の中心でApp Runnerを叫ぶ ~Aurora DSQLを添えて~
tsukuboshi
0
340
初めてのGPTs ~ネコ派を〇〇派に変える技術~
tsukuboshi
0
610
Amplify Gen 2ではじめる 生成AIアプリ開発入門
tsukuboshi
1
1.3k
AWSで構築するパターン別RAG構成解説
tsukuboshi
5
6.2k
AWS構成図から CloudFormationとパラメータシートを 自動生成するシステムを作ってみた
tsukuboshi
0
9.8k
Other Decks in Technology
See All in Technology
Kotlinで学ぶ 代数的データ型
ysknsid25
5
840
開発効率と信頼性を両立する Ubieのプラットフォームエンジニアリング
teru0x1
0
110
Amazon DevOps Guru のベースラインを整備して1ヶ月ほど運用してみた #jawsug_asa / Amazon DevOps Guru trial
masahirokawahara
3
220
Monorepo Error Management: Automated Runbooks and Team-Targeted Alert Distribution
biwashi
1
130
OpenTelemetry Collector internals
ymotongpoo
4
430
從開發到架構設計的可觀測性實踐
philipz
0
200
Test Smarter, Not Harder: Achieving Confidence in Complex Distributed Systems
eliasnogueira
1
140
New Cache Hierarchy for Container Images and OCI Artifacts in Kubernetes Clusters using Containerd / KubeCon + CloudNativeCon Japan
pfn
PRO
0
110
Generational ZGCのメモリ運用改善 - その物理メモリ使用量、本当に正しい?
tabatad
1
290
CSSDay, Amsterdam
brucel
0
290
名刺メーカーDevグループ 紹介資料
sansan33
PRO
0
760
SwiftUI Transaction を徹底活用!ZOZOTOWN UI開発での活用事例
tsuzuki817
1
510
Featured
See All Featured
Agile that works and the tools we love
rasmusluckow
329
21k
Building a Scalable Design System with Sketch
lauravandoore
462
33k
Understanding Cognitive Biases in Performance Measurement
bluesmoon
29
1.7k
We Have a Design System, Now What?
morganepeng
52
7.6k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
42
2.4k
jQuery: Nuts, Bolts and Bling
dougneiner
63
7.8k
Building an army of robots
kneath
306
45k
Build The Right Thing And Hit Your Dates
maggiecrowley
35
2.7k
How to Think Like a Performance Engineer
csswizardry
24
1.7k
The Myth of the Modular Monolith - Day 2 Keynote - Rails World 2024
eileencodes
26
2.8k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
48
5.4k
How GitHub (no longer) Works
holman
314
140k
Transcript
1 JAWS-UG朝会 #39 (今更ながら)AWSのコンテナサービス についてざっくりまとめてみる 2022.11.9
・名前 - つくぼし ・所属 - クラスメソッド株式会社 AWS事業本部 - コンサルティング部 ソリューションアーキテクト
・好きなAWSサービス - AWS CLI ・SNS/ブログ - Twitter(@tsukuboshi0755) - DevelopersIO(つくぼし) 自己紹介
今日話すこと 1. コンテナとは?(おさらい) 2. AWSのコンテナ主要サービス 3. AWSのコンテナ関連サービス 4. 最後に
1. コンテナとは?(おさらい)
注意! しばらくAWSとは全く関係ない説明が続きます。 ご容赦ください。
コンテナって何者? そもそも...
AWS公式によるコンテナの説明 コンテナを使用すると、アプリケーションのコード、構成、依存関係を単一のオブ ジェクトにパッケージ化できます。サーバーにインストールされたオペレーティン グシステムを共有し、リソースが分離したプロセスとして実行され、環境に関係な く、迅速で信頼性も高く、一貫性のあるデプロイを保証しています。 公式ドキュメント:コンテナ - 詳細 - Amazon
AWS
コンテナをググるとよく見る図 仮想化ソフトウェア (ハイパーバイザー) OS ハイパーバイザー仮想化 ミドルウェア アプリケーション OS ミドルウェア アプリケーション
コンテナ仮想化 コンテナ管理ソフトウェア (Docker等) ミドルウェア アプリケーション ミドルウェア アプリケーション OS VM VM Container Container
「ちょっと何言ってるか分からない」
コンテナの歴史を知ろう! コンテナをきちんと理解するには?
コンテナ仮想化の元祖をご存じですか?
コンテナ仮想化の元祖をご存じですか? chroot
chrootとは? • 1979 年 UNIX Version 7 で登場したコンテナ(的機能)の元祖 • chroot
をしたディレクトリがルートディレクトリとして扱われ、そ れより上位のディレクトリは見えなくなる • 元々の用途は、ビルドシステムをクリーンなルートディレクトリ で実行するため • 外部からchroot配下のディレクトリに侵入された際に、指定さ れたディレクトリ外へのアクセスも防げる
chrootの具体例 / /alpha /beta /gumma /beta/a /beta/b /gumma/a chroot chroot
chrootの具体例 / /alpha / / /a /b /a File System
File System chroot chroot
chrootからコンテナ仮想化への発展 • より厳密に仮想ファイルシステムとして分離できるpivot_rootが登場 ◦ chrootはルートディレクトリ配下から比較的容易に抜け出せてしまう が、pivot_rootはほぼ抜け出せなくなっている • pivot_rootで分離した仮想ファイルシステムを、VMと似たような形で扱い たい→コンテナ仮想化(Docker等)で実現 ◦
NameSpaceでユーザIDやプロセスID、NW等を分離 ◦ cgroupでプロセス毎にCPU/メモリを付与
コンテナ仮想化の具体例 / / / /a /b /a File System File
System pivot_root pivot_root
コンテナ仮想化の具体例 / / / /a /b /a Container Container pivot_root
pivot_root IP:10.0.0.1 CPU:1vCPU Memory:4GB IP:10.0.0.2 CPU:0.25vCPU Memory:1GB
高機能な仮想ファイルシステム つまりコンテナとは?(個人的見解)
2. AWSのコンテナ主要サービス
コンテナレジストリ と コンテナオーケストレーション AWSにおける主要なコンテナサービスといえば...
コンテナレジストリとは? • コンテナイメージ(動作環境テンプレート)を保管する機能 ◦ コンテナイメージのバージョン管理や配布が実施可能 ◦ インターネット非公開のプライベートレジストリと、公開されるパブリックレ ジストリが存在する • 代表的なプライベートレジストリ
◦ Docker Registory ◦ Amazon ECR • 代表的なパブリックレジストリ ◦ Docker Hub ◦ Amazon ECR Public
AWSのコンテナレジストリサービス分類 プライベート パブリック ECR ECR Public pub
Amazon ECR(Elastic Container Registry) • AWSが提供する、マネージドプライベートコンテナレジスト リサービス • アクセスには、AWSの認証情報が必要 •
自前でプライベートコンテナレジストリ用のインフラ環境を 構築/運用する必要がない • ECSやIAM等のAWSサービスとの連携が容易
Amazon ECR Public • AWSが提供する、マネージドパブリックコンテナレジストリ サービス • AWSの認証情報なしでアクセス可能 • イメージPull回数制限が存在しないため、CodeBuild等で
Docker Hubを使用する事で発生する`Too Many Requests` エラーを回避可能 • Docker Hubの代替手段として利用できる pub
コンテナオーケストレーションとは? • 複数のサーバをまたいで、コンテナを管理する機能 ◦ コンテナを起動するサーバを決定する ◦ 一部のサーバが停止した際に、コンテナを別サーバで再起動する • 代表的なコンテナオーケストレーションツール ◦
Kubernetes ◦ Docker Swarm ◦ (AWS ECS)
AWSのコンテナオーケストレーションサービス分類 起動タイプ コンテナ プラットフォーム EC2 Fargate ECS ECS on EC2
ECS on Fargate EKS EKS on EC2 EKS on Fargate
Amazon ECS(Elastic Container Service) • AWSが提供する、AWS独自のマネージドコンテナオーケ ストレーションサービス • AWSサービスとの連携が容易 •
バージョンアップは不要 • AWS及びオンプレミス(ECS Anywhere)で使用可能だが、 他クラウド(GCP/Azure等)では使用不可
Amazon EKS(Elastic Kubernetes Service) • AWSが提供する、Kubernetesがベースのマネージドコンテ ナオーケストレーションサービス • Kubernetes関連ツールとの連携が可能 •
Kubernetesのバージョンアップが必要(半年に1度) • Kubernetesについては、AWS、オンプレミス、他クラウド (GCP/Azure等)全てで使用可能
AWS Fargate • コンテナ用のサーバ管理が不要な起動タイプ • クラスター基盤であるEC2を運用する必要がない • 最近はECS ExecやFirelens等の便利な機能が充実 •
EC2起動タイプと比較して、一部制限があるため注意 (GPU使用不可、Windowsコンテナ使用不可等)
3. AWSのコンテナ関連サービス
ECR/ECS/EKS以外のコンテナサービスを知ってますか? App Runner Proton Copilot Cloud Map App Mesh
AWS App Runner • AWSが提供する、マネージドコンテナデプロイサービス • コンテナイメージURI、サービス名、CPU/メモリ、ポート番 号を指定するだけで簡単にデプロイ可能 • VPC/ECS/ALBといったコンテナ基盤が隠蔽され、管理する
必要がない
AWS Proton • AWSが提供する、デプロイワークフローツール • ECSクラスターやNW、DBを含む環境テンプレートと、ECS サービスやCI/CDパイプラインを含むサービステンプレー トの2種類に分けてデプロイを管理 • インフラ基盤担当とアプリケーション担当に分かれて、コ
ンテナ基盤を柔軟に運用できる
AWS Copilot • Amazon ECSを構築するための専用CLIツール • 通常のAWS CLIよりも抽象度が高く、数コマンドでECS環境 を構築可能 •
CI/CDパイプラインもECS環境と合わせて作成できるので 便利
AWS Cloud Map • AWSが提供する、マネージドサービスディスカバリサービ ス • サービスディスカバリ≒特定の識別子から、IPアドレス等 の接続情報を参照解決する機能(例:DNS) •
コンテナ毎に内部DNS名が付与され、名前解決による通 信が可能となる(内部向けALBがいらない)
AWS App Mesh • AWSが提供する、マネージドサービスメッシュサービス • サービスメッシュ≒マイクロサービスアーキテクチャでのコ ンポーネント同士の通信を制御する機能(例:Istio) • 大規模なコンテナ基盤システムにおいて、コンテナ同士の
通信に課題がある場合に用いられる
4. 最後に
まとめ • コンテナ≒高機能な仮想ファイルシステム(個人的 見解) • ECR/ECS/EKSといったコンテナ主要サービスを提供 • App Runner/Proton/Copilot/Cloud Map/App
Meshと いったコンテナ関連サービスも充実
カジュアル面談(Meety)の宣伝 Twitter(@tsukuboshi0755)でピン留めしてます
参考文献 • コンテナ - 詳細 - Amazon AWS • 歴史から紐解くLinuxカーネルのコンテナ機能
• コンテナランタイムはじめの一歩 • 2021年コンテナ最前線〜今AWSでコンテナホスト するならなにが現実解なのか?〜
42