Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
DeepRacerで始める機械学習
Search
tandfy
October 11, 2019
Programming
1
1.6k
DeepRacerで始める機械学習
tandfy
October 11, 2019
Tweet
Share
More Decks by tandfy
See All by tandfy
アプリから集まるイベントデータのリアルタイム処理入門
tandfy
0
1.4k
Amazon SageMakerの最新アップデートの紹介
tandfy
1
850
Amazon Personalizeではじめるレコメンドサービス
tandfy
0
1k
DeepRacerで学ぶ機械学習 1.1
tandfy
0
930
DeepRacerでまなぶ強化学習
tandfy
1
1.3k
Amazon SageMakerではじめる物体検出
tandfy
1
990
Other Decks in Programming
See All in Programming
Vaporモードを大規模サービスに最速導入して学びを共有する
kazukishimamoto
4
4.3k
Golang と Erlang
taiyow
8
1.9k
Webの技術スタックで マルチプラットフォームアプリ開発を可能にするElixirDesktopの紹介
thehaigo
2
920
Progressive Web Apps für Desktop und Mobile mit Angular (Hands-on)
christianliebel
PRO
0
110
Kotlin2でdataクラスの copyメソッドを禁止する/Data class copy function to have the same visibility as constructor
eichisanden
1
140
Java ジェネリクス入門 2024
nagise
0
600
cXML という電子商取引の トランザクションを支える プロトコルと向きあっている話
phigasui
3
2.3k
Vitest Browser Mode への期待 / Vitest Browser Mode
odanado
PRO
2
1.7k
弊社の「意識チョット低いアーキテクチャ」10選
texmeijin
5
23k
ECSのサービス間通信 4つの方法を比較する 〜Canary,Blue/Greenも添えて〜
tkikuc
11
2.3k
リリース8年目のサービスの1800個のERBファイルをViewComponentに移行した方法とその結果
katty0324
5
3.6k
AWS IaCの注目アップデート 2024年10月版
konokenj
3
3.1k
Featured
See All Featured
Producing Creativity
orderedlist
PRO
341
39k
Practical Tips for Bootstrapping Information Extraction Pipelines
honnibal
PRO
9
680
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
28
9.1k
Agile that works and the tools we love
rasmusluckow
327
21k
Building Applications with DynamoDB
mza
90
6.1k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
25
1.8k
Unsuck your backbone
ammeep
668
57k
Designing for humans not robots
tammielis
249
25k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
3
370
Facilitating Awesome Meetings
lara
49
6k
How to Think Like a Performance Engineer
csswizardry
19
1.1k
Product Roadmaps are Hard
iamctodd
PRO
48
10k
Transcript
%FFQ3BDFSͰ࢝ΊΔػցֶश σʔλΞφϦςΟΫεࣄۀຊ෦ΠϯςάϨʔγϣϯ෦ େᖒ༐ే
ࣗݾհ େᖒ༐ే σʔλΞφϦςΟΫεࣄۀຊ෦ΠϯςάϨʔγϣϯ෦ ػցֶशνʔϜΤϯδχΞ ݄ೖࣾ ݄ҭٳ ݱࡏɺࣾձ෮ؼத
ࠓ͢͜ͱ w"84%FFQ3BDFSͱ wػցֶशͷ֓ཁ w"84ʹ͓͚ΔػցֶशαʔϏε w"84%FFQ3BDFSͰԿΛͲ͏ֶΔͷ͔ w"84%FFQ3BDFSΛ࣮ࡍʹͬͯΈΔ όʔνϟϧϦʔάฤ
εϥΠυޙͰೖख͢Δ͜ͱ͕ग़དྷ·͢ͷͰ ൃදதͷ༰ΛϝϞ͢Δඞཁ͋Γ·ͤΜɻ ࣸਅࡱӨΛ͢Δ߹ ϑϥογϡɾγϟολʔԻ͕ग़ͳ͍Α͏ʹྀ͍ͩ͘͝͞ Attention
"84%FFQ3BDFS
https://aws.amazon.com/jp/deepracer/
"84%FFQ3BDFS "84্ͰϞσϧΛֶशͤͯ͞ɺϥδίϯͰࣗಈӡస wϚωδϝϯτίϯιʔϧ͔ΒϞσϧΛֶश wεέʔϧͷϥδίϯʹϞσϧΛࡌͤΔ͜ͱͰࣗಈӡస wόʔνϟϧϦʔάʹϞσϧΛαϒϛοτ͠ɺϥοϓλΠϜΛڝ͏ w"84SF*OWFOU"844VNNJUͰͷ%FFQSBDFS-FBHVFͰ࣮ࡍ ʹΒͤͯϥοϓλΠϜΛڝ͏
https://aws.amazon.com/jp/deepracer/
Ϛωδϝϯτίϯιʔϧ
"84%FFQ3BDFS-FBHVF
Ϟσϧͷֶश
γϛϡϨʔγϣϯ ֶशॳظ
γϛϡϨʔγϣϯ ͋Δఔֶशͨ͠ஈ֊
ػցֶश
ػցֶश֓ཁ ͬ͘͟Γݴ͏ͱنଇੑΛֶशͤ͞Δ͜ͱɻ wڭࢣ͋Γֶश͑Λ༩͑ͯೖྗͱ͑ͷنଇੑΛֶशͤ͞Δ wڭࢣͳֶ͠शɿ͑Λ༩͑ͣʹೖྗͷنଇੑΛֶशͤ͞Δ wڭࢣ͋Γֶशɿجຊతʹ͑Λ༩͑ͣʹೖྗͷنଇੑΛֶशͤ͞ Δ͕ɺ෦తʹ͑Λ༩͑ͯิॿ͢Δ wڧԽֶशɿ͋ΔڥͰใु͕࠷େԽ͢ΔߦಈબͷنଇੑΛֶशͤ͞Δ ͳͲ
χϡʔϥϧωοτϫʔΫ֓ཁ ϑΟʔυϑΥϫʔυ χϡʔϥϧωοτϫʔΫ wೖྗ wόονσʔληοτ͔ΒϥϯμϜʹநग़ wΤϙοΫಉ͡σʔληοτΛ͏ճ wग़ྗ wೖྗ͕//Λ௨ͬͯग़͖ͯͨͷ wྫ
dͷ࣮ͳͲ
ػցֶशྫ ҟৗݕग़
ػցֶशྫ ୯ޠͷຒΊࠐΈ
ػցֶशྫ ΫϥελϦϯά
ڧԽֶश֓ཁ ڥ͔ΒΤʔδΣϯτʹঢ়ଶ ΤʔδΣϯτ͕ঢ়ଶʹج͍ͮͯ ߦಈ ڥ͕ߦಈ݁Ռʹج͍ͮͨใु ΛΤʔδΣϯτ
dΛ܁Γฦ͢ ظతʹ࠷େใु͕Β͑ΔߦಈΛબͿΑ͏ʹֶश͢Δ
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html ը૾͔ΒಛΛऔΓग़ͯ͠ ߦಈఆܨ͕ΔมΛͯ͠ ֤ߦಈͷ֬Λग़ྗ͢Δ
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html PPOͷޣຯ/৽نੑత͕ؔ…
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html PPOͷޣຯ/৽نੑత͕ؔ… ͱ͍͏ײ͡Ͱਂ۷Γ͢Ε৭ʑग़ͯ͘ΔͷͰ ڵຯ͕͋ΔํͥͻௐͯΈ͍ͯͩ͘͞
"84ʹ͓͚Δػցֶश
"84ʹ͓͚Δػցֶश
"84ʹ͓͚Δػցֶश ࠓճؔ͢Δͷʜ
"84ʹ͓͚Δػցֶश ࠓճؔ͢Δͷʜ Ϟσϧͷֶश
"NB[PO4BHF.BLFS ػցֶशͷϑϧϚωʔδυαʔϏε w+VQZUFSϊʔτϒοΫͷϗεςΟϯά wػցֶशϞσϧͷֶश wػցֶशϞσϧͷϗεςΟϯά wϥϕϧ͚ͮ Ξϊςʔγϣϯ ͷཧ ͳͲ
DeepRacerͰ༻
"84ʹ͓͚Δػցֶश ࠓճؔ͢Δͷʜ AWS RoboMaker Ϟσϧͷֶश γϛϡϨʔγϣϯ
"843PCP.BLFS ϩϘοτΞϓϦέʔγϣϯͷ։ൃΛαϙʔτ͢ΔαʔϏε wϑϧϚωʔδυͳγϛϡϨʔγϣϯαʔϏε w$MPVEͱ࿈ܞͨ͠։ൃڥ w304ͷΫϥυ֦ு wϑϦʔτϚωδϝϯτ ͳͲ DeepRacerͰ༻
"84%FFQ3BDFS վΊͯ
"84%FFQ3BDFS RoboMakerͰͷγϛϡϨʔγϣϯͱ SageMakerͰͷϞσϧͷֶशΛ܁Γฦ͢
ϞσϧΛֶशͤͯ͞ https://console.aws.amazon.com/deepracer/home?region=us-east-1#welcome
"84%FFQ3BDFS-FBHVFʹग़ͯ https://console.aws.amazon.com/deepracer/home?region=us-east-1#leaderboards
ϥϯΧʔʜ
%FFQ3BDFSͰ ԿΛͲ͏ֶΔͷ͔
ػցֶशλεΫͷઃܭϞσϧͷվળʹ͍ͭͯମݧ&ֶΔ
ԿΛֶΔͷ͔ʜ wػցֶशλεΫͷઃܭ wϞσϧͷվળ wϋΠύʔύϥϝʔλͷௐ ͳͲ
ػցֶशλεΫͷઃܭ wػցֶशΛͬͨͷղ͖ํͷམͱ͠ࠐΈ wใुؔͷઃܭ wୡ͢Δͷ͕͍͠తΛؒతʹୡͰ͖ΔΑ͏ͳαϒλεΫͷઃఆ ͳͲʹྨࣅ wϥοϓλΠϜ͕͘͢ΔͨΊʹͲ͏ΒͤΕɺͲ͏ֶशͤ͞Εʜ
ใुؔ
ߦಈύλʔϯ
Ϟσϧͷվળ wγϛϡϨʔγϣϯϩάΛͬͨϞσϧͷಛੳ wҙਤͨ͠௨Γʹֶशͯ͠Δ͔ɺͬͯΔ͔Λ֬ೝ͠ɺվળʹ ͭͳ͛Δ w࣮ݧͷ܁Γฦ͠
ใु
Τϯτϩϐʔ
ϋΠύʔύϥϝʔλͷௐ wϞσϧͷֶशͷਐΊํΛௐ͢Δ wχϡʔϥϧωοτϫʔΫޯ߱Լ๏ɺ110ͳͲͷಛੑʹԠ ͨ͡࠷దԽ
%FFQ3BDFSʹ͓͚ΔϋΠύʔύϥϝʔλ
ԿΛֶΔͷ͔ʜ wػցֶशλεΫͷઃܭ wػցֶशΛͬͨͷղ͖ํͷམͱ͠ࠐΈ w͍ϥοϓλΠϜ͕ग़͍ͨ͠Ͳ͏ΒͤΕɺͲ͏ֶशͤ͞Ε͍͍ͷ͔ʜ wϞσϧͷվળ wγϛϡϨʔγϣϯϩάΛͬͨϞσϧͷಛੳ wҙਤͨ͠௨Γʹֶशͯ͠Δ͔ɺͬͯΔ͔֬ೝ͠ɺվળʹͭͳ͛Δ wϋΠύʔύϥϝʔλͷௐ wϞσϧͷֶशͷਐΊํΛௐ͢Δ
%FFQ3BDFSΛͬͯΈΔ
Ϛωδϝϯτίϯιʔϧ
ϞσϧҰཡ
Ϟσϧ࡞
Ϧιʔεͷ࡞
Ϟσϧ໊
ίʔεબ
ߦಈઃఆ
ߦಈύλʔϯ
ใुؔ
ใुؔͷαϯϓϧ
ϋΠύʔύϥϝʔλ
ֶश࣌ؒ
ֶश։࢝
ϞσϧҰཡ
ֶशը໘
3PCP.BLFSͷγϛϡϨʔγϣϯπʔϧ
(B[FCPͰͷγϛϡϨʔγϣϯը໘
ֶशྃ
όʔνϟϧϦʔά
όʔνϟϧϦʔά
όʔνϟϧϦʔάʹొ͢Δ
ԾϦʔάʹొ͢Δ
ԾϦʔάʹొ͢Δ
Ϟσϧαϒϛοτޙ
ϞσϧධՁத
ϞσϧධՁྃ ͤͣ…
ϦʔμʔϘʔυ
·ͱΊ
·ͱΊ w%FFQ3BDFSͰػցֶशɺڧԽֶशʹ৮ΕΔ͜ͱ͕Ͱ͖Δ wࣄલࣝ΄ͱΜͲඞཁͳ͘ɺखܰʹ࢝ΊΒΕΔ wແྉ͋ΔͨΊɺͱΓ͋͑ͣͬͯΈΔͷ͕͓͢͢Ί wͨͩ͠ɺແྉΛ͑Δͱ҆͘ͳ͍ͷͰɺΓ͗͢ҙ ڵຯΛ࣋ͬͨ༰ΛͲΜͲΜ۷ΓԼ͍͛ͯͬͯ Ώ͘Ώ͘ػցֶशڧऀʜ
͋Γ͕ͱ͏͍͟͝·ͨ͠