Upgrade to Pro — share decks privately, control downloads, hide ads and more …

RustでAWS Lambda functionをいい感じに書く

Avatar for taiki45 taiki45
May 14, 2024
Programming
870
2

RustでAWS Lambda functionをいい感じに書く

Talk at UV Study : Rust LT会#49 https://uniquevision.connpass.com/event/316789/

Avatar for taiki45

taiki45

May 14, 2024

More Decks by taiki45

See All by taiki45
Mocking in Rust Applications
Avatar for taiki45 taiki45
2
780
Error Handling in Rust Applications
Avatar for taiki45 taiki45
3
870
Efficient Platform for Security and Compliance
Avatar for taiki45 taiki45
6
1.7k
SPIFFE Meetup Tokyo #2 LT: Envoy SDS
Avatar for taiki45 taiki45
0
860
builderscon Tokyo 2019: Intro Service Mesh
Avatar for taiki45 taiki45
6
3.8k
NoOps Meetup Tokyo #7: 入門サービスメッシュ
Avatar for taiki45 taiki45
4
2k
CloudNative Days Tokyo 2019: Understanding Envoy
Avatar for taiki45 taiki45
3
3.7k
Cloud Native Meetup Tokyo #8 ServiceMesh Day Recap
Avatar for taiki45 taiki45
2
440
EnvoyCon 2018: Building and operating service mesh at mid-size company
Avatar for taiki45 taiki45
3
4.6k

Other Decks in Programming

See All in Programming
Semantic Version 単位で戦略を柔軟に変えて、パッケージアップデートを自動化する
Avatar for daitasu daitasu
1
350
SREの積み重ねがAI駆動開発のガードレールになった ― 7つの実践/SRE Guardrails The 7
Avatar for TomoyaKitaura tomoyakitaura
8
3.9k
20260623_Loop Engineeringで自分の分身の問い合わせBotを作る
Avatar for ryugen04 ryugen04
0
200
【やさしく解説 設計編 #1】「ドメイン駆動」と「実装駆動」ってなに？ 〜設計の考え方を、たとえ話で学ぼう〜
Avatar for HideyukiKitao panda728
PRO
1
110
使用 Meilisearch 建立新聞搜尋工具
Avatar for johnroyer johnroyer
0
130
アルゴリズムは何を圧縮しているのか ─ Haskell から育った「圧縮代数」というメンタルモデル
Avatar for Naoya Ito naoya
16
3.3k
PHPだって関数型したい 〜できること、できないこと〜 / fp-in-php
Avatar for jsoizo jsoizo
0
190
えっ!!コードを読まずに開発を!?
Avatar for はなのうち hananouchi
0
190
Creating Composable Callables in Contemporary C++
Avatar for Björn Fahller rollbear
0
200
なぜ型を書くのか？ TSKaigi2026で改めて考える #tskaigi_smarthr
Avatar for Takuma Kajikawa kajitack
0
340
「正の参照」と 「負の導出」で組む ハーネスエンジニアリング
Avatar for Masahiro Watanabe cottpan
1
140
OSINT for SRE: 
学術論文とポストモーテムから探る
システム障害の共通パターン / SRE NEXT 2026
Avatar for Tomoyuki KOYAMA tomoyk
1
3.4k

Featured

See All Featured
Ecommerce SEO: The Keys for Success Now & Beyond - #SERPConf2024
Avatar for Aleyda Solis aleyda
1
2.1k
Redefining SEO in the New Era of Traffic Generation
Avatar for Szymon Słowik szymonslowik
1
360
Abbi's Birthday
Avatar for Violet Bock coloredviolet
3
8.6k
The State of eCommerce SEO: How to Win in Today's Products SERPs - #SEOweek
Avatar for Aleyda Solis aleyda
2
11k
Agile Leadership in an Agile Organization
Avatar for Dr. Kim W Petersen kimpetersen
PRO
0
190
Rebuilding a faster, lazier Slack
Avatar for samanthasiow samanthasiow
85
9.6k
Skip the Path - Find Your Career Trail
Avatar for Mark Kilby mkilby
1
160
Winning Ecommerce Organic Search in an AI Era - #searchnstuff2025
Avatar for Aleyda Solis aleyda
1
2.1k
Docker and Python
Avatar for Tania Allard trallard
47
3.9k
Money Talks: Using Revenue to Get Sh*t Done
Avatar for Nikki Halliwell nikkihalliwell
0
310
The untapped power of vector embeddings
Avatar for Frank van Dijk frankvandijk
2
1.8k
Principles of Awesome APIs and How to Build Them.
Avatar for Keavy McMinn keavy
128
18k

Transcript

  1. © 2024 Finatext Ltd. RustでAWS Lambda functionを いい感じに書く 1 Finatext

    @taiki45

  2. © 2024 Finatext Ltd. • Taiki Ono • ソフトウェアエンジニア ◦

    Platform engineering and developer productivity • 登壇系だと2018-2019にサービスメッシュ関連 ◦ Envoy proxy • 2022 8月~ Finatext 2 taiki45

  3. © 2024 Finatext Ltd. 3

  4. © 2024 Finatext Ltd. • AWSのコンピューティング方面のサーバーレスなやつ • FaaS的な 4 AWS

    Lambda

  5. © 2024 Finatext Ltd. • 手元での動作確認を手軽にできるようにしたい • テストを手軽に書けるようにしたい • 既存の便利ライブラリの恩恵を受けたい

    • あわよくばLambda以外でも動かしたい 5 Lambda functionを実装する時の課題

  6. © 2024 Finatext Ltd. • github.com/awslabs/aws-lambda-rust-runtime のREADMEはそっ閉じする • HTTP requests受ける系

    ◦ axumを使う ◦ towerの上に載せれるweb frameworkならなんでもOK • その他: EventBridge、SQSなどのイベント駆動 ◦ lambda_runtime::service_fn直じゃなく抽象レイヤー1枚入れる ◦ Handlerみたいな構造体にいろいろ持たせると便利 6 いい感じに実装する

  7. © 2024 Finatext Ltd. • tower::Serviceとは ◦ Composable Service •

    lambda_http::runはServiceを受け取る ◦ lambda_runtime::runも同様 • axum::RouterとかはServiceを実装している ◦ Composableだしlambda_http::runにも渡せる 7 HTTP受け取る系: tower::Service Service ::poll_ready ::call Service ::poll_ready ::call Service ::poll_ready ::call Service ::poll_ready ::call Service ::poll_ready ::call Request Response

  8. © 2024 Finatext Ltd. • tower::httpの各種ミドルウェア ◦ ServiceBuilder<Stack<TimeoutLayer, Stack<SetResponseHeaderLayer<HeaderValue>, Stack<TraceLayer<SharedClassifier<ServerErrorsAsFailures>,

    impl Fn(&Request<Body>) -> Span>, Stack<PropagateRequestIdLayer, Stack<SetRequestIdLayer<OrguReqeustIdMaker>, Stack<SetSensitiveRequestHeadersLayer, Identity>>>>>>> ◦ NormalizePath<Router> ▪ ミドルウェアスタックの型はRouterで吸収テク ▪ apply_middleware(Router) -> Router • tower::ServiceExt::oneshotでテスト実行できる • lambda_http::runに渡さず別の実行関数に渡せばLambdaの外でも動かせる ◦ axumの場合axum::serve • axumみたいなライブラリのルーティング機能を使える ◦ shared stateみたいなのも自分で実装しなくて便利 ◦ extractorみたいなのも便利 ◦ (これ以外はlambda_http::service_fnを使ってもできるはできるはず) 8 towerの上に乗るメリット

  9. © 2024 Finatext Ltd. • lambda_runtime::service_fn直じゃなく抽象レイヤー1枚入れる ◦ Handlerみたいな構造体にいろいろ持たせると便利 • 手元で一発実行するだけのoneshotコマンドをclapとかで作ると動作確認に便利

    • イベントソースからイベント受け取るようなHTTPサーバーを作ってその中で処理を動かす と、手元の動作確認やインテグレーションテスト用に便利 ◦ Lambda外で動かす道筋にもなる 9 その他: EventBridge、SQSなどのイベント駆動

  10. © 2024 Finatext Ltd. 10 その他: Lambdaで動かす時

  11. © 2024 Finatext Ltd. 11 その他: 手元でOneshotに動かす時

  12. © 2024 Finatext Ltd. 12 その他: HTTP serverの裏で動かす時

  13. © 2024 Finatext Ltd. 13 その他: Handler

  14. © 2024 Finatext Ltd. 14 なぜそのような仕組みが動くのだろう？🤔 →→→

  15. © 2024 Finatext Ltd. 15 完全理解: Rust with AWS Lambda

  16. © 2024 Finatext Ltd. 16 AWS Lambda https://docs.aws.amazon.com/lambda/latest/dg/runtimes-api.html

  17. © 2024 Finatext Ltd. Container Process 17 AWS Lambda and

    Rust Lambda service Lambda runtime event loop Runtime<S> ::run_with_incoming trait Service<Request> ::call service_fn(|event: LambdaEvent<T> ...) 色々 /runtime/invocation/next /runtime/invocation/ <AwsRequestId>/response polling 色々 Runtime event loopはmultiplexingしない😳

  18. © 2024 Finatext Ltd. Container Process 18 AWS Lambda and

    Rust Lambda service Lambda SDK event loop Runtime<S> ::run_with_incoming trait Service<Request> ::call service_fn(|event: LambdaEvent<T> ...) 色々 /runtime/invocation/next /runtime/invocation/ <AwsRequestId>/response polling 色々

  19. © 2024 Finatext Ltd. 19 AWS Lambda and Rust Lambda

    SDK event loop Runtime<S> ::run_with_incoming trait Service<Request> ::call service_fn(|event: LambdaEvent<T> ...) Runtime::new(handler: F) wrap_handler(handler, ... CatchPanicService::new(handler) RuntimeApiResponseService::new(safe_service) RuntimeApiClientService::new(response_service, ... RuntimeApiResponseService::call内部でLambdaInvocation (Lambda serviceからのレスポンスで実際のevent payloadが入っている)のbody をdeserializeしてevent struct Tに変換している

  20. © 2024 Finatext Ltd. 20 AWS Lambda and Rust: HTTP

    lambda_http::run(handler: Service<...>) Service<Request>::call Adapter::call(..., req: LambdaEvent<LambdaRequest>) LambdaRequest -> Request (http::Request<Body>) lambda_runtime::run(Adapter::from(handler)) Adapterに変換を任せてあとは lambda_runtime::runの上で動かす

  21. © 2024 Finatext Ltd. • AWS Lambda functionを実装する時のデザインパターンについて紹介しました • AWS

    Lambdaとaws-lambda-rust-runtimeの仕組みについてはブログ記事として投稿しま す！ ◦ aws-lambda-goも扱っています • このデザインパターンを使って開発したorguというGitHub org-wide workflowsを実現する ソフトウェアをOSSとしてリリース予定なのでお楽しみに ◦ 7/9にあるPlatform Engineering Kaigiでもトーク内で扱う予定です！ • 「実用Rustアプリケーション開発」というZenn本を最近書きました！ ◦ https://zenn.dev/taiki45/books/pragmatic-rust-application-development • これからもおもしろいと思う情報発信をしていくのでXのフォローをよければお願いします！ ◦ https://twitter.com/taiki45 Finatextはとてもいい会社かつ絶賛採用中なので興味のある方はぜひ見てみてください！ https://speakerdeck.com/finatext/finatext-are-hiring-engineers 21 おわりに

  22. © 2024 Finatext Ltd. 22