Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
強化学習の実業務への応用について
Search
kitamuaratomokazu
February 16, 2019
Technology
0
800
強化学習の実業務への応用について
kitamuaratomokazu
February 16, 2019
Tweet
Share
More Decks by kitamuaratomokazu
See All by kitamuaratomokazu
Calling Julia from Python (Julia Time)
kitamuratomokazu
0
92
Calling Julia from Python
kitamuratomokazu
2
730
Other Decks in Technology
See All in Technology
GraphQLを活用したリアーキテクチャに対応するSLI/Oの再設計
coconala_engineer
0
200
10分で学ぶ、RAGの仕組みと実践
supermarimobros
0
850
Новые мапы в Go. Вова Марунин, Clatch, МТС
lamodatech
0
1.8k
AIとSREで「今」できること
honmarkhunt
3
700
Databricksで完全履修!オールインワンレイクハウスは実在した!
akuwano
0
150
続・やっぱり余白が大切だった話
kakehashi
PRO
2
210
エンジニアリングで組織のアウトカムを最速で最大化する!
ham0215
1
290
ペアーズにおける評価ドリブンな AI Agent 開発のご紹介
fukubaka0825
9
2.3k
Azure & DevSecOps
kkamegawa
2
140
PagerDuty×ポストモーテムで築く障害対応文化/Building a culture of incident response with PagerDuty and postmortems
aeonpeople
3
550
時間がないなら、つくればいい 〜数十人規模のチームが自律性を発揮するために試しているいくつかのこと〜
kakehashi
PRO
19
3.8k
C++26アップデート 2025-03
faithandbrave
0
1.2k
Featured
See All Featured
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
47
2.7k
A Tale of Four Properties
chriscoyier
159
23k
A Modern Web Designer's Workflow
chriscoyier
693
190k
Bash Introduction
62gerente
612
210k
Design and Strategy: How to Deal with People Who Don’t "Get" Design
morganepeng
129
19k
How STYLIGHT went responsive
nonsquared
100
5.5k
BBQ
matthewcrist
88
9.6k
The Web Performance Landscape in 2024 [PerfNow 2024]
tammyeverts
5
560
Why You Should Never Use an ORM
jnunemaker
PRO
56
9.3k
CSS Pre-Processors: Stylus, Less & Sass
bermonpainter
357
30k
Imperfection Machines: The Place of Print at Facebook
scottboms
267
13k
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
280
13k
Transcript
ڧԽֶशͷ࣮ۀͷԠ༻ʹ͍ͭͯ .BUI$PEJOHڧԽֶशΛޠΖ͏ʂ גࣜձࣾεΫϥϜαΠϯɹදऔకɹଜ༑ LJUBNVSB!TDSVNTJHODPN 5JUMF
ଜɹ༑ ࣄɿגࣜձࣾεΫϥϜαΠϯɹ ɹɹػցֶशΞϓϦέʔγϣϯͷઃܭ։ൃ ɹɹσʔλੳνʔϜͷ্ཱͪ͛ࢧԉ ɹɹڧԽֶशͱ֬ϓϩάϥϛϯάʹؔ৺ɻੵۃతʹࣄྫΛ࡞͍ͬͯ·͢ɻ झຯίϛϡχςΟӡӦ .BUI$PEJOHओ࠵ ɹɹߨࢣ͕ڭ͑ΔͷͰͳ͘ɺࢀՃऀಉ͕࢜ޓ͍ʹࣝͱܙΛ࣋ͪدΓ ɹɹڭֶ͍͑͋Ϳʹָ͠͞Λײ͍ͯ͡·͢ɻ
ࣗݾհ
ʢήʔϜͷੈքͰͳ͘ʣ ڧԽֶशΛ࣮ۀͰԠ༻͍ͯͨ͘͠Ίʹ 5PEBZ`T.BJO5IFNF
ֶशϓϩηε ɹ୳ࡧͱར༻ ɹɹࢼߦࡨޡ͠ͳ͕ΒֶͿ͜ͱ͕Ͱ͖Δ͔ʁ Ϛϧίϑܾఆաఔ ɹݱ࣌ͷใ͔Β࣍ͷܾఆΛԼ͢͜ͱ͕Ͱ͖Δ͔ ɹͦͷܾఆʹΑΓ֬తʹ࣍ͷঢ়ଶભҠ͢Δ͔ʁ ڧԽֶशʹ͍͍ͯΔઃఆͷ֬ೝ
ࠓճҩྍؔͷΫϥΠΞϯτΑΓࣄྫఏڙͷڐՄΛ͍͖ͨͩ·ͨ͠ɻ ʢຊࢿྉͷσʔλͯ͢μϛʔͰ͋Γ࣮ࡍͷσʔλͰ͋Γ·ͤΜɻʣ ԼهͷέʔεΛఆͯ͠ڧԽֶशͰղ͍ͯΈ·ͨ͠ɻ ຖඦ໊ͷױऀ͕དྷӃ͠ελοϑʢޢࢣʣ͕࠾݂͍ͯ͠·͢ɻ ױऀʹΑͬͯ࠾݂͍͢͠ਓͱͦ͏Ͱͳ͍ਓ͕͍Δ͜ͱɻ ελοϑਓʹΑͬͯϕςϥϯ͔Β৽ਓ·Ͱٕྔʹ͕ࠩ͋Γ·͢ɻ Ұఆͷׂ߹Ͱɺ࠾݂ʹࣦഊ͠·͢ɻ ࣄྫɿපӃͷ࠾݂
࠾݂ͷࣦഊΛԼ͛ͯױऀͷຬΛ্͍͛ͨɻ ελοϑͷٕྔͷ্ΛਤΓ͍ͨɻ ղ͖͍ͨ՝
૬͢ΔཁٻΛຬͨ͢࠷దͳߦಈબΛڧԽֶशͰֶͿ͜ͱ͕Մೳ ͔ʁ ࣦഊΛԼ͛Δ ɹϕςϥϯελοϑ͕ରԠ͢Δ ٕೳͷ্ΛਤΔ ɹࣗͷٕྔΑΓগ͍͠͠ױऀʹτϥΠ͢Δ ɹࣦഊ͕͕͋Δ (PBMͷઃܭ
ελοϑ͕దͳқͷױऀΛ୲Ͱ͖Δ͜ͱ ߦಈΛ֤ελοϑ͝ͱʹ5SZ͔1BTT͔Λબͤͯͪ͞ߦ ྻͷঢ়گ͓Αͼελοϑͷۭ͖ঢ়گͱࣗͷྗྔʹԠͨ͡5SZ ͱ1BTTΛબͰ͖ΔΑ͏ʹֶश͍ͨ͠ɻ ݱঢ়Ϛωʔδϟʔ͕ܦݧͱצͰߦ͍ͬͯΔΑ͏Ͱ͢ɻ (PBMͷઃܭ
1P$ ֓೦ݕূ ػցֶश͕Ծʹ͏·͘ਐΉͱɺ ৽ਓࣗͷྗྔʹ͋ͬͨױऀΛબผɹࣦഊԼ͕Δ ϕςϥϯελοϑɹқ͕ߴ͍ױऀΛબผࣦഊ্͕Δ ͣʂ (PBMͷઃܭ
ױऀқελοϑٕྔ ਪఆ ֬Ϟσϧ ױऀͱελοϑ Ϛονϯά ҰͭͷϞσϧͰҰʹղ͘ͷ͍͠ͷͰ Λׂ͠·ͨ͠ ڧԽֶश ਪఆͨ͠Λಛྔ ใुͱͯ͠ར༻͢Δ
֬ϞσϧͱڧԽֶशΛ߹Θͤͯղ͍͍ͯ͘ ϞσϦϯάͷํ
ίϛϡχςΟϝϯόʔͱͷσΟεΧογϣϯ ॳ࿈ଓ࣌ؒͷ.%1Λߟ͍͑ͯ ͨɻ3FXBSEױऀͷͪ࣌ؒΛ ϖφϧςΟͱͯ͠༩͑ΔํࣜΛݕ ౼్͍͕ͯͨ͠தͰํసɻ ࢄ࣌ؒͷߦಈͱͯ͠ใु ٕྔɿTLJMMͱױऀࠔɿ EJGpDVMUZͰදݱ
࣮ɿϞσϦϯά ωοτϫʔΫ ɹ%2/ ӅΕʢೖྗ࣍ݩͱಉ͡GVMMDPOOFDUFESFMVʣɹग़ྗ࣍ݩɹMJOFBS ಛྔ ױऀࠔɿ࿈ଓ ελοϑٕྔ࿈ଓ
ελοϑͷۭ͖༧ఆ࣌ؒ࿈ଓ ରԠελοϑPOFIPU ߦಈ ɹUSZQBTT࣍ݩ ใु ޭEJGpDVMUZTLJMM ׂɹௐͣΈ ࣦഊTLJMMEJGpDVMUZ ׂ̌ɹௐͣΈ ͪ࣌ؒͳ͠ͷQBTT ͪ࣌ؒ͋ΓͷQBTTTLJMMEJGpDVMUZ ʢͪ࣌ؒ ͪ࣌ؒͷ࠷େ ؔۙࣅͰɺॳχϡʔϥϧωοτͰͳ͍ͷΛ࣮͠Α͏ͱ͕ͨ͠χϡʔϥϧωοτͷํָ͕ʹ࣮Ͱ͖ΔͷͰ ࣌ؒͷؔͰ%2/Ͱ࣮͢Δɻ
ֶशͷਪҠϥϯμϜʹߦಈબ
ֶशͷਪҠϥϯμϜʹߦಈબ
ֶशͷਪҠ%2/ͰͲ͏͔ʁ
ֶशͷਪҠ%2/ ֶशͷ݁Ռɹϕςϥϯʹ1BTT͢Δ͜ͱΛ֮͑ͨɻ
ϞσϦϯάͷݟ͠ ωοτϫʔΫ ɹ%2/ ೖྗ̍̎࣍ݩɹӅΕʢ࣍ݩGVMMDPOOFDUFESFMVʣɹग़ྗ࣍ݩɹMJOFBS MPTTGVODUJPONTF PQUJNJ[FS"EBN ɹMFBSOJOHSBUF ಛྔ ױऀࠔɿ࿈ଓ
ελοϑٕྔ࿈ଓ ελοϑͷۭ͖ঢ়گPOFIPU ରԠελοϑPOFIPU ߦಈ ɹUSZQBTTͷೋ ใु ޭ ࣦഊ ͪ࣌ؒͳ͠ͷQBTT ͪ࣌ؒ͋ΓͷQBTT ɹTUFQޙ·ͰΛߟྀͨ͠ใुͰֶश ʣใुؔͱಛϕΫτϧΛݟͨ͠ΓMFBSOJOHSBUFΛখͨ͘͞͠Γͨ͠ɻ
ֶशͷਪҠ%2/Ϟσϧͱใुؔݟ͠
ֶशͷਪҠ%2/Ϟσϧͱใुؔݟ͠ ࣗͷ࣮ྗʹԠͨ͡ױऀΛબΜͰ5SZ͢ΔΑ͏ʹͳͬͨɻ ͔͜͜Β͞ΒʹϒϥογϡΞοϓ͍͖ͯ͠·͢ɻ
ڧԽֶशͷָ͠͞ ͏·͍͔͘ͳ͍࣌ɺ"HFOUͷؾ࣋ͪΛߟ͑ͨΓ͢Δɻ ใुʹΑͬͯڍಈ͕͝Ζͬͱ͔ΘΔ ڧԽֶशʹ͍ͭͯͷจ͕ʑ͍͍͢͝Ͱൃද͞Ε͍ͯΔɻ ใुؔઃܭγϡϛϨʔλ࡞ɺֶशϞσϧͳͲߟ͑Δ͜ ͱ͕ଟ͘ΫϥΠΞϯτνʔϜϝϯόʔͱͷΓͱΓͳͲɺ େม͕ͩઃܭϓϩηεָ͕͍͠ɻ
͍֓͠೦ٕज़ɺγϯϓϧͳྫͰ֬ೝͨ͠Γϝϯόʔ͕ର͢Δ͜ͱͰຊ࣭తͳཧղ ΛಘΒΕΔͱߟ͑·͢ɻຊάϧʔϓɺͦͷΑ͏ͳ͜ͱ͕Ͱ͖ΔΑ͏ͳίϛϡχςΟͱͳ Δ͜ͱΛࢦͯ͠ӡӦ͍ͯ͠·͢ɻڵຯ͕͋Δํͥͻ͝ࢀՃ͍ͩ͘͞ɻ IUUQTNBUIDPEJOHDPOOQBTTDPN .BUI$PEJOHͷհ
͝੩ௌ͋Γ͕ͱ͏͍͟͝·ͨ͠ɻ -BTU