LangSmithを活用したRAGの評価・改善フローの整備

2024年5月22日 #mlopsコミュニティ

os1ma

May 22, 2024

More Decks by os1ma

See All by os1ma

9月24日発売！書籍『LLMアプリケーション評価駆動開発』の歩き方 - 書籍紹介 - 第2部「実戦編」

3

340

そのAIエージェント、役に立っていますか？―AIエージェントの評価を小さく始めるためのヒント

2

560

コーディングエージェントのハーネスから見る、AIエージェントの現在

2

300

これだけで丸わかり！LangChain v1.0 アップデートまとめ

6

3.1k

Claude Codeが働くAI中心の業務システム構築の挑戦―AIエージェント中心の働き方を目指して

10

7.4k

LangChain Interrupt & LangChain Ambassadors meetingレポート

2

1.1k

AIエージェントのフレームワークを見るときの個人的注目ポイント

1

990

Cursor AgentによるパーソナルAIアシスタント育成入門―業務のプロンプト化・MCPの活用

16

10k

AIエージェントキャッチアップと論文リサーチ

7

2.1k

Other Decks in Technology

See All in Technology

Vibe Coding で作ったプロダクトをどう安全に動かすか / How to Safely Run Products Built with Vibe Coding

0

460

SREの視点で考えるSIEM活用術〜AWS環境でのセキュリティ強化〜

PRO

0

160

なぜ「決定性」が決定的に重要なのか？ Durable Execution 基盤の数理的理解 #serverlessjp / ServerlessDays Tokyo 2026

3

1.1k

30座EKS, 180次升級淬煉的EKS Upgrade Skill 的歷程

0

210

AIで社員の自主発信に広報目線を組み込む

0

140

え、こんなに早く改修できるの？──新人エンジニアとスクラムマスターの2人が語る、AI×アジャイル開発の現場

2

640

アプリをもっと"iOSアプリっぽく"する小さな工夫 / Small Touches That Make Your App Feel More Like an iOS App

2

1k

アクセスキーこわいやめかたと漏らさない工夫

1

600

aws-iot-platform-architecture-use-cases.pdf

0

490

Claude Codeを「使うほど育つ」AI秘書にするノウハウ

PRO

33

30k

SREへの勘違いに気づいた後の話

0

130

フルカイテン株式会社エンジニア向け採用資料

0

12k

Featured

See All Featured

Why You Should Never Use an ORM

PRO

61

10k

Taking LLMs out of the black box: A practical guide to human-in-the-loop distillation

PRO

3

2.4k

Deep Space Network (abreviated)

0

320

Rebuilding a faster, lazier Slack

85

9.6k

Why Mistakes Are the Best Teachers: Turning Failure into a Pathway for Growth

0

290

Darren the Foodie - Storyboard

PRO

4

3.9k

Neural Spatial Audio Processing for Sound Field Analysis and Control

0

510

0

830

Leveraging Curiosity to Care for An Aging Population

1

500

The Illustrated Guide to Node.js - THAT Conference 2024

1

520

Money Talks: Using Revenue to Get Sh*t Done

0

500

Large-scale JavaScript Application Architecture

515

110k

Transcript