Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Sign up for free
Menu
Search
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Features
All features
Private URLs
Password Protection
Custom URLS
Scheduled publishing
Remove Branding
Restrict embedding
Deck Collections
Notes
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Explore
Featured decks
Featured speakers
Programming
Technology
Storyboards
Pricing
Search
Sign in
Sign up for free
個人開発してみてわかった AIエージェントの設計と評価
Search
Sponsored
·
SiteGround - Reliable hosting with speed, security, and support you can count on.
→
らむ
February 26, 2026
Technology
97
0
Share
Embed
Copy iframe code
Copy JS code
Copy link
Start on current slide
個人開発してみてわかった AIエージェントの設計と評価
2026/02/26 MOSH Tech Meetup Vol.2
らむ
February 26, 2026
Transcript
11 slides
個人開発してみてわかった AIエージェントの設計と評価 2026.2.26 MOSH Tech Meetup Vol.2
自己紹介 らむ ・もこもこWeb エンジニア ・最近してたこと ・Raycast の⾃作拡張機能のストア公開申請 ・イベント参加で湯島から三ノ輪までお散歩
サービス紹介 ⾏き先・予算・時間・やりたいことを入れるだけで、AI エージェントが 最適なスポットの選定・スケジューリング・費⽤⾒積もりを⾃動で⾏い、 おでかけプランを⽣成してくれる。
マルチエージェント設計 Phase 0 :開始時刻の⾃動決定 Phase 1 : データ並列収集 Phase 2a
:スポット選定エージェント Phase 2b :タイミング + コストエージェント Phase 2c :プランタイトルエージェント Phase 3 :コード組み立て + Zod 検証 単⼀エージェントで実⾏すると実⾏時間が長くなり、出⼒のブレ幅が⼤きく なるのでエージェントに任せる内容を分解した。
エイリアス置き換え Google Places API のスポット情報を取得するとID と写真参照がハッシュ値 になっている。LLM にハッシュ値を渡すとハッシュ値を改ざんしてしまう。 ・LLM に必要な情報だけ渡す
・ 推論結果から構造化し直す ・セキュリティの観点でも重要 ・トークン使⽤量も抑えられる
プロンプトチューニング ・訪問順序 ・バランスを考慮した上で出発地近くから ・時間が長い場合に食事が必要 ・居酒屋は18 時以降 ・ランダム性 ・個性的な場所を優先 ・Temperature を1.8
に設定
フォールバック ・スポット滞在時間と移動ルートの推論 ・JSON 形式で返却される想定 ・説明文が入る ・空で返却される ・JSON 以外で返却された場合 ・ロジックで滞在時間とルートを算出
サービスの運用改善 ・AI エージェント:Langfuse ・LLM の推論状況の確認 ・セルフホストできる ・インフラ:Vercel Logs ・サーバーのログの確認 ・アクセス:Google
Analytics ・流入や動線の確認
定量評価 ・Langfuse のScores ・⽣成速度:3.26 秒 ・予算遵守率:0.69 ・時間辺りのスポット数:0.67 ・オプション ・API からデータを取得できているか
・トレンド:Tavily ・天気:Open-Meteo
定性評価 ・Langfuse のLLM-as-a-Judge ・プロンプトを作っておくと0-1 で評価 ・何% のアウトプットを評価するか決めれる
まとめ AI エージェントは適切に分割してパラレルに実⾏しよう 因子の寄与率を特定して、推論に必要な情報に絞って渡そう プロンプトを構造化してチェーンすることで背景を伝えよう 定量のアウトプットから質を高めて、定性のアウトプットをよくしよう
More Decks by らむ
See All by らむ
未来を描き変化の中で学び直す ヴァンガードから考える、AI時代のチーム開発
lamb_moko
0
100
Other Decks in Technology
See All in Technology
パスワードのない鍵で、 データを手元に置く
ginjihayashi
0
370
Amazon Bedrock AgentCore の基礎とセキュリティ・ガバナンス
ren8k
0
140
Datadog の権限統制 〜Org 統合に向けて調べた注意点 / JDDUG-Meetup_24
visional_engineering_and_design
1
190
Claude Codeで新規事業を伸ばせるか? Zennの試行錯誤の記録
wadayusuke
2
240
サーバーラックは作る時代! 3Dプリンターで作る10インチラックのススメ
jacopen
2
470
マネジメントされる側の仕事は「文句」を言うこと
riyaamemiya
7
5.8k
飯から始まるデータエンジニア
sansantech
PRO
0
110
AWS Emulator を評価する: 手元で動く AWS の API の仕組み、始め方、確かめ方
inariku
PRO
2
770
AIで実装が加速したのに、 なぜ私は仕事の大半で人と話し続けていたのか?
say_no_w
0
190
エンタープライズIAMについて - ID・権限をどう統制するか
oidfj
1
200
SREのためのFinOps入門
muziyoshiz
3
1.6k
契約書SaaSにAIエージェントを組み込む
sansantech
PRO
0
190
Featured
See All Featured
SEO for Brand Visibility & Recognition
aleyda
0
4.9k
Impact Scores and Hybrid Strategies: The future of link building
tamaranovitovic
0
490
Data-driven link building: lessons from a $708K investment (BrightonSEO talk)
szymonslowik
1
1.4k
No one is an island. Learnings from fostering a developers community.
thoeni
21
3.9k
How to build a perfect <img>
jonoalderson
1
6.2k
Into the Great Unknown - MozCon
thekraken
41
2.8k
My Coaching Mixtape
mlcsv
0
390
Accessibility Awareness
sabderemane
1
310
個人開発の失敗を避けるイケてる考え方 / tips for indie hackers
panda_program
123
22k
Put a Button on it: Removing Barriers to Going Fast.
kastner
60
4.6k
Why Mistakes Are the Best Teachers: Turning Failure into a Pathway for Growth
auna
0
360
Faster Mobile Websites
deanohume
310
32k