Upgrade to PRO for Only $50/Year—Limited-Time Offer! 🔥

RustでAWS Lambda functionをいい感じに書く

Avatar for taiki45 taiki45
May 14, 2024
Programming
2
750

RustでAWS Lambda functionをいい感じに書く

Talk at UV Study : Rust LT会#49 https://uniquevision.connpass.com/event/316789/

Avatar for taiki45

taiki45

May 14, 2024
Tweet

More Decks by taiki45

See All by taiki45
Mocking in Rust Applications
Avatar for taiki45 taiki45
2
670
Error Handling in Rust Applications
Avatar for taiki45 taiki45
3
720
Efficient Platform for Security and Compliance
Avatar for taiki45 taiki45
5
1.6k
SPIFFE Meetup Tokyo #2 LT: Envoy SDS
Avatar for taiki45 taiki45
0
790
builderscon Tokyo 2019: Intro Service Mesh
Avatar for taiki45 taiki45
6
3.5k
NoOps Meetup Tokyo #7: 入門サービスメッシュ
Avatar for taiki45 taiki45
4
1.9k
CloudNative Days Tokyo 2019: Understanding Envoy
Avatar for taiki45 taiki45
3
3.5k
Cloud Native Meetup Tokyo #8 ServiceMesh Day Recap
Avatar for taiki45 taiki45
2
400
EnvoyCon 2018: Building and operating service mesh at mid-size company
Avatar for taiki45 taiki45
3
4.5k

Other Decks in Programming

See All in Programming
「コードは上から下へ読むのが一番」と思った時に、思い出してほしい話
Avatar for HideyukiKitao panda728
PRO
23
12k
C-Shared Buildで突破するAI Agent バックテストの壁
Avatar for po3rin po3rin
0
220
テストやOSS開発に役立つSetup PHP Action
Avatar for Atsushi Matsuo matsuo_atsushi
0
140
Integrating WordPress and Symfony
Avatar for Alexandre Salomé alexandresalome
0
120
AIと協働し、イベントソーシングとアクターモデルで作る後悔しないアーキテクチャ Regret-Free Architecture with AI, Event Sourcing, and Actors
Avatar for Tomohisa Takaoka tomohisa
5
18k
分散DBって何者なんだ．．． Spannerから学ぶRDBとの違い
Avatar for kensho iwashi623
0
170
ローターアクトEクラブ アメリカンナイト：川端 柚菜 氏（Japan O.K. ローターアクトEクラブ 会長）:2720 Japan O.K. ロータリーEクラブ2025年12月1日卓話
Avatar for 2720 Japan O.K. ロータリーEクラブ 2720japanoke
0
500
ゲームの物理 剛体編
Avatar for Fadis fadis
0
160
Socio-Technical Evolution: Growing an Architecture and Its Organization for Fast Flow
Avatar for Chris Richardson cer
PRO
0
270
Why Kotlin? 電子カルテを Kotlin で開発する理由 / Why Kotlin? at Henry
Avatar for Agata Naomichi agatan
2
6.3k
NUMA環境とコンテナランタイム ― youki における Linux Memory Policy 実装
Avatar for n4mlz n4mlz
1
100
【CA.ai #3】ワークフローから見直すAIエージェント — 必要な場面と“選ばない”判断
Avatar for SatoAoaka satoaoaka
0
220

Featured

See All Featured
Practical Orchestrator
Avatar for Shlomi Noach shlominoach
190
11k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
Avatar for Irina Nazarova irinanazarova
9
1.1k
How GitHub (no longer) Works
Avatar for Zach Holman holman
316
140k
Why You Should Never Use an ORM
Avatar for John Nunemaker jnunemaker
PRO
60
9.6k
Making Projects Easy
Avatar for Brett Harned brettharned
120
6.5k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
Avatar for Eileen M. Uchitelle eileencodes
37
2.6k
A Tale of Four Properties
Avatar for Chris Coyier chriscoyier
162
23k
It's Worth the Effort
Avatar for 3n 3n
187
29k
Building Flexible Design Systems
Avatar for Yesenia Perez-Cruz yeseniaperezcruz
329
39k
Learning to Love Humans: Emotional Interface Design
Avatar for Aarron Walter aarron
274
41k
CoffeeScript is Beautiful & I Never Want to Write Plain JavaScript Again
Avatar for Sam Stephenson sstephenson
162
15k
Mobile First: as difficult as doing things right
Avatar for Swwweet swwweet
225
10k

Transcript

  1. © 2024 Finatext Ltd. RustでAWS Lambda functionを いい感じに書く 1 Finatext

    @taiki45

  2. © 2024 Finatext Ltd. • Taiki Ono • ソフトウェアエンジニア ◦

    Platform engineering and developer productivity • 登壇系だと2018-2019にサービスメッシュ関連 ◦ Envoy proxy • 2022 8月~ Finatext 2 taiki45

  3. © 2024 Finatext Ltd. 3

  4. © 2024 Finatext Ltd. • AWSのコンピューティング方面のサーバーレスなやつ • FaaS的な 4 AWS

    Lambda

  5. © 2024 Finatext Ltd. • 手元での動作確認を手軽にできるようにしたい • テストを手軽に書けるようにしたい • 既存の便利ライブラリの恩恵を受けたい

    • あわよくばLambda以外でも動かしたい 5 Lambda functionを実装する時の課題

  6. © 2024 Finatext Ltd. • github.com/awslabs/aws-lambda-rust-runtime のREADMEはそっ閉じする • HTTP requests受ける系

    ◦ axumを使う ◦ towerの上に載せれるweb frameworkならなんでもOK • その他: EventBridge、SQSなどのイベント駆動 ◦ lambda_runtime::service_fn直じゃなく抽象レイヤー1枚入れる ◦ Handlerみたいな構造体にいろいろ持たせると便利 6 いい感じに実装する

  7. © 2024 Finatext Ltd. • tower::Serviceとは ◦ Composable Service •

    lambda_http::runはServiceを受け取る ◦ lambda_runtime::runも同様 • axum::RouterとかはServiceを実装している ◦ Composableだしlambda_http::runにも渡せる 7 HTTP受け取る系: tower::Service Service ::poll_ready ::call Service ::poll_ready ::call Service ::poll_ready ::call Service ::poll_ready ::call Service ::poll_ready ::call Request Response

  8. © 2024 Finatext Ltd. • tower::httpの各種ミドルウェア ◦ ServiceBuilder<Stack<TimeoutLayer, Stack<SetResponseHeaderLayer<HeaderValue>, Stack<TraceLayer<SharedClassifier<ServerErrorsAsFailures>,

    impl Fn(&Request<Body>) -> Span>, Stack<PropagateRequestIdLayer, Stack<SetRequestIdLayer<OrguReqeustIdMaker>, Stack<SetSensitiveRequestHeadersLayer, Identity>>>>>>> ◦ NormalizePath<Router> ▪ ミドルウェアスタックの型はRouterで吸収テク ▪ apply_middleware(Router) -> Router • tower::ServiceExt::oneshotでテスト実行できる • lambda_http::runに渡さず別の実行関数に渡せばLambdaの外でも動かせる ◦ axumの場合axum::serve • axumみたいなライブラリのルーティング機能を使える ◦ shared stateみたいなのも自分で実装しなくて便利 ◦ extractorみたいなのも便利 ◦ (これ以外はlambda_http::service_fnを使ってもできるはできるはず) 8 towerの上に乗るメリット

  9. © 2024 Finatext Ltd. • lambda_runtime::service_fn直じゃなく抽象レイヤー1枚入れる ◦ Handlerみたいな構造体にいろいろ持たせると便利 • 手元で一発実行するだけのoneshotコマンドをclapとかで作ると動作確認に便利

    • イベントソースからイベント受け取るようなHTTPサーバーを作ってその中で処理を動かす と、手元の動作確認やインテグレーションテスト用に便利 ◦ Lambda外で動かす道筋にもなる 9 その他: EventBridge、SQSなどのイベント駆動

  10. © 2024 Finatext Ltd. 10 その他: Lambdaで動かす時

  11. © 2024 Finatext Ltd. 11 その他: 手元でOneshotに動かす時

  12. © 2024 Finatext Ltd. 12 その他: HTTP serverの裏で動かす時

  13. © 2024 Finatext Ltd. 13 その他: Handler

  14. © 2024 Finatext Ltd. 14 なぜそのような仕組みが動くのだろう？🤔 →→→

  15. © 2024 Finatext Ltd. 15 完全理解: Rust with AWS Lambda

  16. © 2024 Finatext Ltd. 16 AWS Lambda https://docs.aws.amazon.com/lambda/latest/dg/runtimes-api.html

  17. © 2024 Finatext Ltd. Container Process 17 AWS Lambda and

    Rust Lambda service Lambda runtime event loop Runtime<S> ::run_with_incoming trait Service<Request> ::call service_fn(|event: LambdaEvent<T> ...) 色々 /runtime/invocation/next /runtime/invocation/ <AwsRequestId>/response polling 色々 Runtime event loopはmultiplexingしない😳

  18. © 2024 Finatext Ltd. Container Process 18 AWS Lambda and

    Rust Lambda service Lambda SDK event loop Runtime<S> ::run_with_incoming trait Service<Request> ::call service_fn(|event: LambdaEvent<T> ...) 色々 /runtime/invocation/next /runtime/invocation/ <AwsRequestId>/response polling 色々

  19. © 2024 Finatext Ltd. 19 AWS Lambda and Rust Lambda

    SDK event loop Runtime<S> ::run_with_incoming trait Service<Request> ::call service_fn(|event: LambdaEvent<T> ...) Runtime::new(handler: F) wrap_handler(handler, ... CatchPanicService::new(handler) RuntimeApiResponseService::new(safe_service) RuntimeApiClientService::new(response_service, ... RuntimeApiResponseService::call内部でLambdaInvocation (Lambda serviceからのレスポンスで実際のevent payloadが入っている)のbody をdeserializeしてevent struct Tに変換している

  20. © 2024 Finatext Ltd. 20 AWS Lambda and Rust: HTTP

    lambda_http::run(handler: Service<...>) Service<Request>::call Adapter::call(..., req: LambdaEvent<LambdaRequest>) LambdaRequest -> Request (http::Request<Body>) lambda_runtime::run(Adapter::from(handler)) Adapterに変換を任せてあとは lambda_runtime::runの上で動かす

  21. © 2024 Finatext Ltd. • AWS Lambda functionを実装する時のデザインパターンについて紹介しました • AWS

    Lambdaとaws-lambda-rust-runtimeの仕組みについてはブログ記事として投稿しま す！ ◦ aws-lambda-goも扱っています • このデザインパターンを使って開発したorguというGitHub org-wide workflowsを実現する ソフトウェアをOSSとしてリリース予定なのでお楽しみに ◦ 7/9にあるPlatform Engineering Kaigiでもトーク内で扱う予定です！ • 「実用Rustアプリケーション開発」というZenn本を最近書きました！ ◦ https://zenn.dev/taiki45/books/pragmatic-rust-application-development • これからもおもしろいと思う情報発信をしていくのでXのフォローをよければお願いします！ ◦ https://twitter.com/taiki45 Finatextはとてもいい会社かつ絶賛採用中なので興味のある方はぜひ見てみてください！ https://speakerdeck.com/finatext/finatext-are-hiring-engineers 21 おわりに

  22. © 2024 Finatext Ltd. 22