Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
小さなものでも Step Functions / Serverless Meetup Fuku...
Search
cohalz
February 17, 2024
Programming
0
130
小さなものでも Step Functions / Serverless Meetup Fukuoka Re:boot
https://serverless.connpass.com/event/305300/
の発表資料です
cohalz
February 17, 2024
Tweet
Share
More Decks by cohalz
See All by cohalz
はてなのSRE組織2024 / Road to SRE NEXT@福岡
cohalz
2
1.4k
SREのキャリア、 あるいは生態 / #ya8
cohalz
11
1.5k
カンファレンスのボランティアスタッフって何やるの? / DAIMYO Meetup #4
cohalz
0
91
ECSのCI/CD改善と標準化の取り組み / JAWS FESTA 2023 in Kyushu
cohalz
8
5.9k
ecspressoへの貢献を振り返る / JAWS-UG コンテナ支部 #24 ecspresso MeetUp
cohalz
1
5.8k
はてなフォトライフをECSに移行した話 / Hatena Engineer Seminar #20
cohalz
1
18k
SREの異動と働き方 〜はてなブログ編〜 / Hatena Engineer Seminar #13
cohalz
0
2.2k
Envoy.なんか / Kyoto.なんか #5
cohalz
0
150
CDKを用いたモダンなECSクラスタの構築と運用 / AWS Cloud Development Kit -CDK- Meetup
cohalz
6
3.2k
Other Decks in Programming
See All in Programming
VS Code extension: ドラッグ&ドロップでファイルを並び替える
ttrace
0
130
全方位強化 Python 服務可觀測性:以 FastAPI 和 Grafana Stack 為例
blueswen
1
360
DjangoNinjaで高速なAPI開発を実現する
masaya00
0
420
複数プロダクトの技術改善・クラウド移行に向き合うチームのフレキシブルなペア・モブプログラミングの実践 / Flexible Pair Programming And Mob Programming
honyanya
0
100
個人開発のおいしさと続け方
3l4l5
1
260
Pythonによるイベントソーシングへの挑戦と現状に対する考察 / Challenging Event Sourcing with Python and Reflections on the Current State
nrslib
3
840
為醫療加裝Python的引擎
cclai999
0
270
AWS Lambda Web Adapterを活用する新しいサーバーレスの実装パターン
tmokmss
6
5.3k
A Journey of Contribution and Collaboration in Open Source
ivargrimstad
0
860
Vue :: Better Testing 2024
up1
1
350
NANIMACHI
naokiito
0
930
Compose Multiplatform과 Ktor로 플랫폼의 경계를 넘어보자
kwakeuijin
0
200
Featured
See All Featured
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
41
9.2k
Imperfection Machines: The Place of Print at Facebook
scottboms
263
13k
Designing the Hi-DPI Web
ddemaree
279
34k
Robots, Beer and Maslow
schacon
PRO
157
8.2k
Fireside Chat
paigeccino
32
2.9k
Design by the Numbers
sachag
278
19k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
249
21k
Easily Structure & Communicate Ideas using Wireframe
afnizarnur
191
16k
Mobile First: as difficult as doing things right
swwweet
222
8.8k
Become a Pro
speakerdeck
PRO
24
4.9k
What the flash - Photography Introduction
edds
67
11k
Art, The Web, and Tiny UX
lynnandtonic
295
20k
Transcript
小さなものでも Step Functions id:cohalz / @cohalz Serverless Meetup Fukuoka Re:boot
1
自己紹介 • こはる(@cohalz) • 株式会社はてな SRE ◦ はてなブックマーク ◦ はてなブログ
• 費用削減・MySQL・OpenTelemetry • 福岡でリモート勤務 2
3 Step Functions 使ってますか?
社内のStep Functions過去事例 • はてなブログの独自ドメインHTTPS配信 ◦ AWSではてなブログの常時HTTPS配信をバーンとやる話 / The Epic of
migration from HTTP to HTTPS on Hatena Blog with AWS • はてなダイアリーや魔法のiらんどのデータ移行 ◦ ちょっぴりDiveDeepするAWSの時間 AWS Dev Day 2023 Tokyo 延長 戦 実践データ移行 〜はてなダイアリーや魔法のiらんどの事例と共に〜 4
大規模なものだけ? • ちょっとした運用ツールにもStep Functions を使い始めています ◦ 定期・不定期でLambdaやCIから実行しているもの ◦ 既存のものを置き換える形で使い始めている 5
小さなものがあると学習しやすい • Step Functions自体は初見は難しい • 処理を想像できるサイズのものを用意するこ とで大規模なものを作成・運用できるように 6
Lambda運用の課題 • 長時間は動かせない(最大15分) ◦ 待ち時間があるような処理にはあまり向いてない • ランタイムの更新が必要(Go, Node, …) ◦
別の人が書いたものをメンテする場合はさらに大変 • エラーもCloudWatch Logsから探しにくい ◦ どういう入力でどういうエラーになったのか 7
Step Functionsだと • 時間制限がない ◦ 状態遷移数による課金 ◦ 時間かかる場合は組み込みのWaitを使える • ランタイムのことを考えなくて良い
• 処理の流れやエラーが追いやすい ◦ リトライやエラー処理を組み込みやすい ◦ 組み込んでも流れを把握しやすい 8
成功・失敗のログが わかりやすい • 失敗した時にどこが失敗 したのかわかりやすい ◦ 赤・橙、緑、白 • 失敗したところから再実 行できる
◦ redrive機能(2023/11) 9
Step Functionsの機能追加 • AWS SDK統合(2021/09) ◦ 大抵のAWSの操作はできるように • HTTPリクエスト(2023/11) ◦
認証が必要なエンドポイントもリクエスト可能 ◦ GitHubやSlackなども操作できるように 10
Lambdaを採用した方が良いケース • VPC内のリソースにアクセスする • 複雑な文字列処理 ◦ Step Functions組み込みの文字列関数が貧弱 ◦ もし作れたとしても読み解くのが難しいものになる
11
例: ステージング環境の作成・停止 • はてなブックマークのステージング環境を支 える技術 - Hatena Developer Blog ◦
毎日営業時間になったらステージング環境が本番の データでコピーされ定時後には終了する ◦ Aurora, ElastiCache, OpenSearchで実施 ◦ ほぼAWS SDK統合と少しのLambdaで実現 12
気をつけてる ポイント • コードコメントと GitHubでMermaid記 法を使い図を出す • コードやプルリクを見 ただけで処理の流れが わかるように
13
どうやって実装してる? • コンソールで作って試してその後CDKで同じコー ドを書くと言う流れで実装 ◦ コンソールは試行錯誤しやすい ◦ CDKは依存関係を記述しやすい • Application
Composerとか使ったら楽になる? ◦ 良い方法知っていたら教えてください 14
おわり • 細かいLambdaもStep Functionsに置き換えて 運用を楽にしています ◦ メンテしやすくしていきましょう ◦ 最近のStep Functionsも進化しています
• Step Functions事例聞きたいです 15