LangSmithを活用したRAGの評価・改善フローの整備

May 22, 2024

4.6k

LangSmithを活用したRAGの評価・改善フローの整備

2024年5月22日 #mlopsコミュニティ

os1ma

May 22, 2024

More Decks by os1ma

See All by os1ma

9月24日発売！書籍『LLMアプリケーション評価駆動開発』の歩き方 - 書籍紹介 - 第2部「実践編」

3

550

そのAIエージェント、役に立っていますか？―AIエージェントの評価を小さく始めるためのヒント

2

930

コーディングエージェントのハーネスから見る、AIエージェントの現在

2

320

これだけで丸わかり！LangChain v1.0 アップデートまとめ

6

3.1k

Claude Codeが働くAI中心の業務システム構築の挑戦―AIエージェント中心の働き方を目指して

10

7.5k

LangChain Interrupt & LangChain Ambassadors meetingレポート

2

1.1k

AIエージェントのフレームワークを見るときの個人的注目ポイント

1

1k

Cursor AgentによるパーソナルAIアシスタント育成入門―業務のプロンプト化・MCPの活用

16

10k

AIエージェントキャッチアップと論文リサーチ

7

2.1k

Other Decks in Technology

See All in Technology

「とりあえず動く」の先へ。 AI時代のチーム開発と内部設計/2026-slsdays

0

100

Meet AgentCore Identity Consent Portal

2

150

セルフサービスのオブザーバビリティ基盤をOpenTelemetryで作る / Building a Self-Service Observability Platform with OpenTelemetry

3

500

AI 時代の Azure エンジニアリング～私たちは何を磨き、何を任せるのか～

1

270

Incremental HTTP

5

1.9k

spanner-autoscalerに学ぶ CRD設計パターン 〜自動化と緊急時対応を両立する Kubernetesコントローラーの作り方〜

0

220

高負荷プロダクション環境におけるAWS Lambdaのリアル〜スケールとコストを左右する実行ライフサイクルの技術仕様〜

2

850

CI/CDではもう遅い - 人とAIが迂回しないDevSecOps Verify基盤の再設計 -

1

610

覗いてみよう関数型ビジュアル言語×2Dグラフィックスの世界

0

160

AWS FinOps Agent 結局何が得意なの？

0

230

Snowflake Horizon Catalog と Apache Iceberg で作るオープンなデータ基盤

0

370

HolmesGPTで始めるSREエージェント入門！プラットフォームの障害調査はAIにお任せ〜

0

250

Featured

See All Featured

Bridging the Design Gap: How Collaborative Modelling removes blockers to flow between stakeholders and teams @FastFlow conf

0

710

Money Talks: Using Revenue to Get Sh*t Done

0

510

Claude Code のすすめ

67

230k

Sharpening the Axe: The Primacy of Toolmaking

46

3k

Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End

254

22k

Leveraging Curiosity to Care for An Aging Population

1

520

A Soul's Torment

8

3.7k

More Than Pixels: Becoming A User Experience Designer

3

540

State of Search Keynote: SEO is Dead Long Live SEO

0

300

Taking LLMs out of the black box: A practical guide to human-in-the-loop distillation

PRO

3

2.4k

エンジニアに許された特別な時間の終わり

109

250k

<Decoding/> the Language of Devs - We Love SEO 2024

1

330

Transcript