Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
KARTE CraftにおけるLLM活用~Craft Functions Copilot~
Search
tik-son
October 02, 2023
Technology
1
1.8k
KARTE CraftにおけるLLM活用~Craft Functions Copilot~
Microsoftと語る LLM実装の最前線 でお話した KARTE CraftにおけるLLM活用 について
https://cto-a.connpass.com/event/292450/
tik-son
October 02, 2023
Tweet
Share
More Decks by tik-son
See All by tik-son
Microsoft の AI 技術 をベースに構成される Craft Copilot
tikson
0
480
AWS とKARTE で作る User State Driven System / user-state-driven-system-with-aws-and-karte
tikson
0
2.4k
User State Driven System with Amazon EventBridge & KARTE
tikson
1
3.8k
PLAID’s Journey with multi cloud
tikson
1
3.7k
マルチクラウドで構築する大規模解析サービス/戦略とポイントについて/
tikson
9
27k
KARTEを支えるAutoScaling~SpotInstance編
tikson
0
1.7k
Other Decks in Technology
See All in Technology
AIのための オンボーディングドキュメントを整備する - hirotea
hirotea
9
2.3k
オープンソースのハードウェアのコンテストに参加している話
iotengineer22
0
600
データ戦略部門 紹介資料
sansan33
PRO
1
3.1k
FastMCPでSQLをチェックしてくれるMCPサーバーを自作してCursorから動かしてみた
nayuts
1
210
面接を通過するためにやってて良かったこと3選
sansantech
PRO
0
130
Babylon.jsでゲームを作ってみよう
limes2018
0
100
ソフトウェアは捨てやすく作ろう/Let's make software easy to discard
sanogemaru
10
5.8k
コードの考古学 〜労務システムから発掘した成長の糧〜
kenta_smarthr
1
1.2k
Introduction to Sansan, inc / Sansan Global Development Center, Inc.
sansan33
PRO
0
2.6k
カンファレンスのつくりかた / The Conference Code: What Makes It All Work
tomzoh
8
930
[zh-TW] DevOpsDays Taipei 2025 -- Creating Awesome Change in SmartNews!(machine translation)
martin_lover
1
650
ソフトウェアテストのAI活用_ver1.10
fumisuke
0
240
Featured
See All Featured
Unsuck your backbone
ammeep
671
58k
StorybookのUI Testing Handbookを読んだ
zakiyama
30
5.8k
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
123
52k
Build your cross-platform service in a week with App Engine
jlugia
231
18k
Testing 201, or: Great Expectations
jmmastey
42
7.5k
Gamification - CAS2011
davidbonilla
81
5.3k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
29
9.5k
Building a Modern Day E-commerce SEO Strategy
aleyda
40
7.3k
Optimizing for Happiness
mojombo
378
70k
Building Adaptive Systems
keathley
41
2.6k
Imperfection Machines: The Place of Print at Facebook
scottboms
267
13k
Fontdeck: Realign not Redesign
paulrobertlloyd
84
5.5k
Transcript
© PLAID, Incɹ KARTE Craft LLM Craft Functions Copilot 2
023 . 0 9 . 2 8 Microsoft LLM
© PLAID, Incɹ VP of Engineering & Product, Ecosystem
2014 KARTE KARTE API Ecosystem Team 20 22 APN AWS Top Engineers 2
© PLAID, Incɹ ࠓͷ͓ Craft Functions Copilot KARTEΛ֦ு͢Δ Javascript ͷίʔυΛ
LLMΛͬͯੜΈग़ͤΔػೳ (ઈࢍ։ൃத) 3
© PLAID, Incɹ KARTE 4 CX( ) ϝΠϯϢʔβʔϚʔέλʔ 4
© PLAID, Incɹ KARTE Craft KARTE Craft KARTE ͷػೳΛ֦ு͢ΔͨΊͷ։ൃϓϥοτϑΥʔϜɻಛʹ Craft
FunctionsΛར༻͢Δͱɺ ಠࣗαʔόʔΛཱͯͳͯ͘֎෦αʔϏεͱͷϦΞϧλΠϜ࿈ܞΛ࣮ݱͰ͖Δɻ KARTEͰൃੜ͢ΔϢʔβʔͷঢ়ଶͷมԽ ɺಛఆͷεέδϡʔϧΛτϦΨʔʹɺ Craft FunctionsΛ௨ͯ͡൚༻ͳϓϩάϥϜΛ࣮ߦɻ ࣾ֎ͷ༷ʑͳγεςϜͱKARTEͷ࿈ܞΛεϜʔζʹ࣮ݱɻ 5
© PLAID, Incɹ 6
© PLAID, Incɹ 7
© PLAID, Incɹ 8
© PLAID, Incɹ 9
© PLAID, Incɹ GPT 4 ? 10
© PLAID, Incɹ 11 Craft Functions Copilot KARTEΛ֦ு͢Δ Javascript ͷίʔυΛ
LLMΛͬͯੜΈग़ͤΔػೳ (ઈࢍ։ൃத)
© PLAID, Incɹ 12 KARTE ར༻ऀ Azure OpenAI GPT4 ίʔυੜ
Λࢦࣔ Craft Functions Copilot (v 0 . 0 . 1 ) 12 GPT4Λར༻͢ΔϓϩϯϓτΛෳ༻ҙ͠ɺ Πϯϓοτࣗવݴޠೖྗͷ νϟοτΠϯλʔϑΣʔεͰ࡞
© PLAID, Incɹ KARTE API Craft - - - 13
© PLAID, Incɹ Ϧιʔε্ݶ 14 ຊ൪ఏڙʹ͓͚Δ੍ ϨΠςϯγʔ GPT-3.5 and GPT-4
API response time measurements - FYI Azure OpenAI Service ͷΫΥʔλͱ੍ݶ ίετ Azure OpenAI Service ͷՁ֨
© PLAID, Incɹ • ͯ͢ΛGPT4 + ϓϩϯϓτΤϯδχΞϦϯάͷྗٕͰղ͜͏ͱ͠ͳ͍ • λεΫΛదͳཻʹׂ͢Δ •
ׂͨ͠λεΫ͝ͱʹUIΛͨͤΔ • LLMΛ͍ͬͯΔ͔Βͱݴͬͯɺશͯࣗવݴޠೖྗ+ LLMʹ͢ߏ ͱ͠ͳ͍ ◦ ηϨΫτϘοΫεɺݕࡧɺݻఆʹର͢ΔબϘλϯͳͲɺదࡐదॴͳΠ ϯϓοτํࣜΛ༻ҙ͢Δ ຊ൪ఏڙʹ͓͚Δ੍ Λ౿·͑ͨ ઃܭͷϙΠϯτ 15
© PLAID, Incɹ 16 εςοϓΛׂ ༷ʑͳΠϯϓοτํࣜ
© PLAID, Incɹ KARTE ར༻ऀ Azure OpenAI GPT4 εςοϓ 2
Azure OpenAI Embeddings/ GPT3.5 Azure Cognitive Search Vector Search - KARTE API Metadata - Craft Functions Metadata - etc… DB - KARTE API Metadata - Craft Functions Metadata - etc… Azure OpenAI Embeddings/ GPT3.5 Azure Cognitive Search Vector Search - KARTE API Metadata - Craft Functions Metadata - etc… DB - KARTE API Metadata - Craft Functions Metadata - etc… Azure OpenAI Embeddings Azure Cognitive Search Vector Search - Craft Functions Trigger Metadata DB - Craft Functions Trigger Metadata 2. σʔλऔಘεςοϓʹ͓͚Δ ࣭/ઃఆ 1.τϦΨʔεςοϓʹ͓͚Δ ࣭/ઃఆ 3.σʔλग़ྗεςοϓʹ͓͚Δ ࣭/ઃఆ τϦΨʔεςοϓʹ͓͚Δ ઃఆσʔλ 4.ίʔυੜ Λࢦࣔ σʔλऔಘεςοϓʹ͓͚Δ ઃఆσʔλ σʔλग़ྗεςοϓʹ͓͚Δ ઃఆσʔλ ֤εςοϓͷઃఆσʔλΛར༻ͯ͠ίʔυੜ Craft Functions Copilot (v 0 . 1 . 0 ) 17
© PLAID, Incɹ • GPT4Λ༗ޮతʹར༻ͨ͠UIʹΑΓ ◦ τʔΫϯ͕60%ݮ ◦ ϨΠςϯγʔ͕65%վળ ◦
ੜ͞ΕΔίʔυͷਫ਼ ◦ Ϣʔβମݧ্ ݁Ռ / ·ͱΊ • Craft Function Copilotv0.1.0ɻײతͰͳ͍෦͕͋Δ • LLMपΓͷϓϩμΫτΛ͏·͘Έ߹ΘͤΕɺ UI/UXͬͱվળग़དྷΔ༨͋Γͦ͏ 18