Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
DeepRacerで始める機械学習
Search
tandfy
October 11, 2019
Programming
1
1.6k
DeepRacerで始める機械学習
tandfy
October 11, 2019
Tweet
Share
More Decks by tandfy
See All by tandfy
アプリから集まるイベントデータのリアルタイム処理入門
tandfy
0
1.4k
Amazon SageMakerの最新アップデートの紹介
tandfy
1
860
Amazon Personalizeではじめるレコメンドサービス
tandfy
0
1k
DeepRacerで学ぶ機械学習 1.1
tandfy
0
940
DeepRacerでまなぶ強化学習
tandfy
1
1.3k
Amazon SageMakerではじめる物体検出
tandfy
1
990
Other Decks in Programming
See All in Programming
2024/11/8 関西Kaggler会 2024 #3 / Kaggle Kernel で Gemma 2 × vLLM を動かす。
kohecchi
5
920
型付き API リクエストを実現するいくつかの手法とその選択 / Typed API Request
euxn23
8
2.2k
『ドメイン駆動設計をはじめよう』のモデリングアプローチ
masuda220
PRO
8
540
Why Jakarta EE Matters to Spring - and Vice Versa
ivargrimstad
0
1.1k
ペアーズにおけるAmazon Bedrockを⽤いた障害対応⽀援 ⽣成AIツールの導⼊事例 @ 20241115配信AWSウェビナー登壇
fukubaka0825
6
1.9k
CSC509 Lecture 11
javiergs
PRO
0
180
AWS Lambdaから始まった Serverlessの「熱」とキャリアパス / It started with AWS Lambda Serverless “fever” and career path
seike460
PRO
1
260
シェーダーで魅せるMapLibreの動的ラスタータイル
satoshi7190
1
480
距離関数を極める! / SESSIONS 2024
gam0022
0
280
見せてあげますよ、「本物のLaravel批判」ってやつを。
77web
7
7.8k
Jakarta EE meets AI
ivargrimstad
0
180
「今のプロジェクトいろいろ大変なんですよ、app/services とかもあって……」/After Kaigi on Rails 2024 LT Night
junk0612
5
2.2k
Featured
See All Featured
XXLCSS - How to scale CSS and keep your sanity
sugarenia
246
1.3M
No one is an island. Learnings from fostering a developers community.
thoeni
19
3k
GraphQLの誤解/rethinking-graphql
sonatard
67
10k
Building a Modern Day E-commerce SEO Strategy
aleyda
38
6.9k
Why Our Code Smells
bkeepers
PRO
334
57k
Testing 201, or: Great Expectations
jmmastey
38
7.1k
A Tale of Four Properties
chriscoyier
156
23k
Statistics for Hackers
jakevdp
796
220k
Writing Fast Ruby
sferik
627
61k
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
169
50k
Fantastic passwords and where to find them - at NoRuKo
philnash
50
2.9k
Exploring the Power of Turbo Streams & Action Cable | RailsConf2023
kevinliebholz
27
4.3k
Transcript
%FFQ3BDFSͰ࢝ΊΔػցֶश σʔλΞφϦςΟΫεࣄۀຊ෦ΠϯςάϨʔγϣϯ෦ େᖒ༐ే
ࣗݾհ େᖒ༐ే σʔλΞφϦςΟΫεࣄۀຊ෦ΠϯςάϨʔγϣϯ෦ ػցֶशνʔϜΤϯδχΞ ݄ೖࣾ ݄ҭٳ ݱࡏɺࣾձ෮ؼத
ࠓ͢͜ͱ w"84%FFQ3BDFSͱ wػցֶशͷ֓ཁ w"84ʹ͓͚ΔػցֶशαʔϏε w"84%FFQ3BDFSͰԿΛͲ͏ֶΔͷ͔ w"84%FFQ3BDFSΛ࣮ࡍʹͬͯΈΔ όʔνϟϧϦʔάฤ
εϥΠυޙͰೖख͢Δ͜ͱ͕ग़དྷ·͢ͷͰ ൃදதͷ༰ΛϝϞ͢Δඞཁ͋Γ·ͤΜɻ ࣸਅࡱӨΛ͢Δ߹ ϑϥογϡɾγϟολʔԻ͕ग़ͳ͍Α͏ʹྀ͍ͩ͘͝͞ Attention
"84%FFQ3BDFS
https://aws.amazon.com/jp/deepracer/
"84%FFQ3BDFS "84্ͰϞσϧΛֶशͤͯ͞ɺϥδίϯͰࣗಈӡస wϚωδϝϯτίϯιʔϧ͔ΒϞσϧΛֶश wεέʔϧͷϥδίϯʹϞσϧΛࡌͤΔ͜ͱͰࣗಈӡస wόʔνϟϧϦʔάʹϞσϧΛαϒϛοτ͠ɺϥοϓλΠϜΛڝ͏ w"84SF*OWFOU"844VNNJUͰͷ%FFQSBDFS-FBHVFͰ࣮ࡍ ʹΒͤͯϥοϓλΠϜΛڝ͏
https://aws.amazon.com/jp/deepracer/
Ϛωδϝϯτίϯιʔϧ
"84%FFQ3BDFS-FBHVF
Ϟσϧͷֶश
γϛϡϨʔγϣϯ ֶशॳظ
γϛϡϨʔγϣϯ ͋Δఔֶशͨ͠ஈ֊
ػցֶश
ػցֶश֓ཁ ͬ͘͟Γݴ͏ͱنଇੑΛֶशͤ͞Δ͜ͱɻ wڭࢣ͋Γֶश͑Λ༩͑ͯೖྗͱ͑ͷنଇੑΛֶशͤ͞Δ wڭࢣͳֶ͠शɿ͑Λ༩͑ͣʹೖྗͷنଇੑΛֶशͤ͞Δ wڭࢣ͋Γֶशɿجຊతʹ͑Λ༩͑ͣʹೖྗͷنଇੑΛֶशͤ͞ Δ͕ɺ෦తʹ͑Λ༩͑ͯิॿ͢Δ wڧԽֶशɿ͋ΔڥͰใु͕࠷େԽ͢ΔߦಈબͷنଇੑΛֶशͤ͞Δ ͳͲ
χϡʔϥϧωοτϫʔΫ֓ཁ ϑΟʔυϑΥϫʔυ χϡʔϥϧωοτϫʔΫ wೖྗ wόονσʔληοτ͔ΒϥϯμϜʹநग़ wΤϙοΫಉ͡σʔληοτΛ͏ճ wग़ྗ wೖྗ͕//Λ௨ͬͯग़͖ͯͨͷ wྫ
dͷ࣮ͳͲ
ػցֶशྫ ҟৗݕग़
ػցֶशྫ ୯ޠͷຒΊࠐΈ
ػցֶशྫ ΫϥελϦϯά
ڧԽֶश֓ཁ ڥ͔ΒΤʔδΣϯτʹঢ়ଶ ΤʔδΣϯτ͕ঢ়ଶʹج͍ͮͯ ߦಈ ڥ͕ߦಈ݁Ռʹج͍ͮͨใु ΛΤʔδΣϯτ
dΛ܁Γฦ͢ ظతʹ࠷େใु͕Β͑ΔߦಈΛબͿΑ͏ʹֶश͢Δ
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html ը૾͔ΒಛΛऔΓग़ͯ͠ ߦಈఆܨ͕ΔมΛͯ͠ ֤ߦಈͷ֬Λग़ྗ͢Δ
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html PPOͷޣຯ/৽نੑత͕ؔ…
%FFQ3BDFSͰΘΕ͍ͯΔख๏ 1SPYJNBM1PMJDZ0QUJNJ[BUJPO https://nervanasystems.github.io/coach/components/agents/policy_optimization/ppo.html PPOͷޣຯ/৽نੑత͕ؔ… ͱ͍͏ײ͡Ͱਂ۷Γ͢Ε৭ʑग़ͯ͘ΔͷͰ ڵຯ͕͋ΔํͥͻௐͯΈ͍ͯͩ͘͞
"84ʹ͓͚Δػցֶश
"84ʹ͓͚Δػցֶश
"84ʹ͓͚Δػցֶश ࠓճؔ͢Δͷʜ
"84ʹ͓͚Δػցֶश ࠓճؔ͢Δͷʜ Ϟσϧͷֶश
"NB[PO4BHF.BLFS ػցֶशͷϑϧϚωʔδυαʔϏε w+VQZUFSϊʔτϒοΫͷϗεςΟϯά wػցֶशϞσϧͷֶश wػցֶशϞσϧͷϗεςΟϯά wϥϕϧ͚ͮ Ξϊςʔγϣϯ ͷཧ ͳͲ
DeepRacerͰ༻
"84ʹ͓͚Δػցֶश ࠓճؔ͢Δͷʜ AWS RoboMaker Ϟσϧͷֶश γϛϡϨʔγϣϯ
"843PCP.BLFS ϩϘοτΞϓϦέʔγϣϯͷ։ൃΛαϙʔτ͢ΔαʔϏε wϑϧϚωʔδυͳγϛϡϨʔγϣϯαʔϏε w$MPVEͱ࿈ܞͨ͠։ൃڥ w304ͷΫϥυ֦ு wϑϦʔτϚωδϝϯτ ͳͲ DeepRacerͰ༻
"84%FFQ3BDFS վΊͯ
"84%FFQ3BDFS RoboMakerͰͷγϛϡϨʔγϣϯͱ SageMakerͰͷϞσϧͷֶशΛ܁Γฦ͢
ϞσϧΛֶशͤͯ͞ https://console.aws.amazon.com/deepracer/home?region=us-east-1#welcome
"84%FFQ3BDFS-FBHVFʹग़ͯ https://console.aws.amazon.com/deepracer/home?region=us-east-1#leaderboards
ϥϯΧʔʜ
%FFQ3BDFSͰ ԿΛͲ͏ֶΔͷ͔
ػցֶशλεΫͷઃܭϞσϧͷվળʹ͍ͭͯମݧ&ֶΔ
ԿΛֶΔͷ͔ʜ wػցֶशλεΫͷઃܭ wϞσϧͷվળ wϋΠύʔύϥϝʔλͷௐ ͳͲ
ػցֶशλεΫͷઃܭ wػցֶशΛͬͨͷղ͖ํͷམͱ͠ࠐΈ wใुؔͷઃܭ wୡ͢Δͷ͕͍͠తΛؒతʹୡͰ͖ΔΑ͏ͳαϒλεΫͷઃఆ ͳͲʹྨࣅ wϥοϓλΠϜ͕͘͢ΔͨΊʹͲ͏ΒͤΕɺͲ͏ֶशͤ͞Εʜ
ใुؔ
ߦಈύλʔϯ
Ϟσϧͷվળ wγϛϡϨʔγϣϯϩάΛͬͨϞσϧͷಛੳ wҙਤͨ͠௨Γʹֶशͯ͠Δ͔ɺͬͯΔ͔Λ֬ೝ͠ɺվળʹ ͭͳ͛Δ w࣮ݧͷ܁Γฦ͠
ใु
Τϯτϩϐʔ
ϋΠύʔύϥϝʔλͷௐ wϞσϧͷֶशͷਐΊํΛௐ͢Δ wχϡʔϥϧωοτϫʔΫޯ߱Լ๏ɺ110ͳͲͷಛੑʹԠ ͨ͡࠷దԽ
%FFQ3BDFSʹ͓͚ΔϋΠύʔύϥϝʔλ
ԿΛֶΔͷ͔ʜ wػցֶशλεΫͷઃܭ wػցֶशΛͬͨͷղ͖ํͷམͱ͠ࠐΈ w͍ϥοϓλΠϜ͕ग़͍ͨ͠Ͳ͏ΒͤΕɺͲ͏ֶशͤ͞Ε͍͍ͷ͔ʜ wϞσϧͷվળ wγϛϡϨʔγϣϯϩάΛͬͨϞσϧͷಛੳ wҙਤͨ͠௨Γʹֶशͯ͠Δ͔ɺͬͯΔ͔֬ೝ͠ɺվળʹͭͳ͛Δ wϋΠύʔύϥϝʔλͷௐ wϞσϧͷֶशͷਐΊํΛௐ͢Δ
%FFQ3BDFSΛͬͯΈΔ
Ϛωδϝϯτίϯιʔϧ
ϞσϧҰཡ
Ϟσϧ࡞
Ϧιʔεͷ࡞
Ϟσϧ໊
ίʔεબ
ߦಈઃఆ
ߦಈύλʔϯ
ใुؔ
ใुؔͷαϯϓϧ
ϋΠύʔύϥϝʔλ
ֶश࣌ؒ
ֶश։࢝
ϞσϧҰཡ
ֶशը໘
3PCP.BLFSͷγϛϡϨʔγϣϯπʔϧ
(B[FCPͰͷγϛϡϨʔγϣϯը໘
ֶशྃ
όʔνϟϧϦʔά
όʔνϟϧϦʔά
όʔνϟϧϦʔάʹొ͢Δ
ԾϦʔάʹొ͢Δ
ԾϦʔάʹొ͢Δ
Ϟσϧαϒϛοτޙ
ϞσϧධՁத
ϞσϧධՁྃ ͤͣ…
ϦʔμʔϘʔυ
·ͱΊ
·ͱΊ w%FFQ3BDFSͰػցֶशɺڧԽֶशʹ৮ΕΔ͜ͱ͕Ͱ͖Δ wࣄલࣝ΄ͱΜͲඞཁͳ͘ɺखܰʹ࢝ΊΒΕΔ wແྉ͋ΔͨΊɺͱΓ͋͑ͣͬͯΈΔͷ͕͓͢͢Ί wͨͩ͠ɺແྉΛ͑Δͱ҆͘ͳ͍ͷͰɺΓ͗͢ҙ ڵຯΛ࣋ͬͨ༰ΛͲΜͲΜ۷ΓԼ͍͛ͯͬͯ Ώ͘Ώ͘ػցֶशڧऀʜ
͋Γ͕ͱ͏͍͟͝·ͨ͠