Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
DeepRacerに挑戦してみた
Search
okiyasu
November 23, 2019
Programming
0
160
DeepRacerに挑戦してみた
DeepRacerを色々とやってみたという話
okiyasu
November 23, 2019
Tweet
Share
More Decks by okiyasu
See All by okiyasu
kintone Café 愛媛 Vol.15 KOUTEI
okiyasu
0
51
kintone Café 愛媛 Vol.14 ハンズオン
okiyasu
0
380
re:Invent2019報告
okiyasu
0
180
IoT時代のレコード管理を考える
okiyasu
0
290
これからの『モバイル版のアプリ作成』を語ろう
okiyasu
0
340
kintoneの新モバイルUIが活きるレスポンシブなポータル作成
okiyasu
0
470
仕込むと楽しいkintoneの通知機能
okiyasu
0
260
『俺が「気をつけて作業する」 なんて出来るわけがない』 からのライセンス発行作業
okiyasu
0
520
「お前のコレクションを売ってくれ」から始まる課金実装
okiyasu
0
33
Other Decks in Programming
See All in Programming
単体テストを書かない技術 #phpcon_odawara
o0h
PRO
27
8.3k
dbtのドメイン分割による データ基盤の改善とDigdagとの連携
sakama
0
340
Goのエラースタックトレースの歴史と今後
sonatard
9
1.5k
Netty Chicago Java User Group 2024-04-17
sullis
0
180
Git Lint
bkuhlmann
4
750
SIMD Parallel Programming with the Vector API
josepaumard
0
180
見た目から始める生産性向上
ikumatadokoro
7
840
『Railsオワコン』と言われる時代に、なぜブルーモ証券はRailsを選ぶのか
free_world21
0
240
GitHub Actionsで泣かないためにやっておきたい設定 / Recommended GHA settings to avoid crying
pinkumohikan
3
530
Ruby Pattern Matching
bkuhlmann
0
930
DMMプラットフォームがTiDB Cloudを採用した背景
pospome
8
4.1k
Prepare for Jakarta EE 11 - Performance and Developer Productivity
ivargrimstad
0
800
Featured
See All Featured
10 Git Anti Patterns You Should be Aware of
lemiorhan
648
58k
Fight the Zombie Pattern Library - RWD Summit 2016
marcelosomers
227
16k
For a Future-Friendly Web
brad_frost
172
9k
Cheating the UX When There Is Nothing More to Optimize - PixelPioneers
stephaniewalter
274
13k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
17
1.4k
[RailsConf 2023 Opening Keynote] The Magic of Rails
eileencodes
9
8.3k
Stop Working from a Prison Cell
hatefulcrawdad
266
19k
Embracing the Ebb and Flow
colly
80
4.1k
The Art of Programming - Codeland 2020
erikaheidi
42
12k
4 Signs Your Business is Dying
shpigford
175
21k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
6
1.5k
"I'm Feeling Lucky" - Building Great Search Experiences for Today's Users (#IAC19)
danielanewman
221
21k
Transcript
DeepRacerʹઓͯ͠Έͨʂ START YOUR ENGINE!! 2019/11/23 ࢛ࠃΫϥυ͓ว࿏2019 ಙౡ JAWS-UG Ѫඤɹԭ ོ҆
ࣗݾհ ݩεʔύʔܦӦ ࣮Ո +"846(Ѫඤ LJOUPOF$BGÉѪඤ 5XJMJP+16(Ѫඤ ͘͞ΒΫϥϒѪඤ 403"$0.6(4IJLPLV +1@4USJQFT
ۀϋοΫ ݿ൪ಓࢣʢఱ࠽ೝఆূ൪อ༗ʣ αΠϘζެೝLJOUPOFΤόϯδΣϦετ LJOUPOF"TTPDJBUF LJOUPOF"QQ%FTJHO4QFDJBMJTU LJOUPOF$VTUPNJ[BUJPO4QFDJBMJTU "84ೝఆιϦϡʔγϣϯΞʔΩςΫτrΞιγΤΠτ "84ೝఆσϕϩούʔrΞιγΤΠτ ԭོ҆ʢ͓͖͔ͨ͢ʣ
དྷिɺre:Invent2019ʹߦ͖·͢ʢ4ճʣ
DeepRacerͬͯͬͯ·͢ʁ ➤ લʹΧϝϥ͕͍ͯͯɺը૾Λݟͯίʔ εΛΓ·͢ ➤ ڧԽֶशͱ͍͏ΈͰΓํΛ֮͑· ͢ ➤ ֶशͷΓํγϯϓϧɻifͱܭࢉ͕ࣜ ॻ͚ΕेͰ͢
➤ ཪଆͷ໘ͳ͜ͱAWS DeepRacerଆͰ ͬͯ͘Ε·͢ ➤ λΠϜ͕ग़ͯɺੈքதͰڝ૪ʹͳΔͷͰ ͘ͳΓ·͢ʂ
Ϙλϯ̍ͭͰ͜Μͳߏ͕ࣗಈͰ࡞͞Ε·͢
Կ͕ྑ͍͔ͱ͍͏ͱ ➤ ࢼͦ͏ͱͯ͠ɺಈ࡞͢ΔڥΛߏங͢Δஈ֊Ͱ͏·͍͔ͣ͘࠳ં͢Δ ➤ खॻ͖จࣈೝࣝΈ͍ͨͳͭͩͱʮͬͯΈͨʯͰऴΘͬͪΌ͏ ➤ ϋϯζΦϯͰࢼ͕ͨ͠ɺͦͷ࣍ʹվྑ͠Α͏ʹํ๏͕Θ͔Βͳ͍ ➤ ڥɺϘλϯΛԡ͚ͩ͢Ͱࣗಈ࡞ ➤
αϯϓϧͰ؆୯ʹࢼͤΔ͠ɺλΠϜͰ༏ྼ͕؆୯ʹΘ͔Δ ➤ ධՁؔΛࣗ༝ʹมߋͯ͠ࢼͤΔ DeepRacerͩͱ ࠓ·Ͱ
ࢼ͞ͳ͍ͱ ͍ͬͨͳ͍ʂ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢͲ͏ಈ͔͘ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ ͳ͓ɺ࡞ͨ͠ϞσϧΛݩʹ࠶ֶश͢Δ߹ɺ Action space͚ͩมߋͰ͖·ͤΜʢͳͥॏཁͳͷ͔ޙड़ʣ ॏཁʂʂ
ࠓճͷ ֶशํ…
WAYPOINTௐࠪͱ͔ ंͷ͖ͱ͔
ͳΜͯͷࢭΊͯ Ͱ͖Δ͚ͩγϯϓϧʹ
ਅΜதΔ
͚Εྑ͍
࠶ֶशΛࢼ͢
ਅΜதΔ ͚Εྑ͍ ࠶ֶशΛࢼ͢
େମɺ͜Μͳઃఆ
ਅΜதΔ ͪΌΜͱΰʔϧͯ͠Δʂ
͚Εྑ͍ ̍ඵॖͨ͠ʂ ͬͱ͍͚Δ͔ʂʂ
࠶ֶशΛࢼ͢ ഁͨ͠ʢྦ
ํੑؒҧ͑Δͱ ࠶ֶशͯ͠ ݁Ռग़ͳ͍
·ͱΊͯΈΔͱ ➤ ࠷େεϐʔυ͕ɹ6m/s ͩͬͨͷͰɺͬͱͯ͘ྑ͔ͬͨ ➤ ͔֬ɺ12m/s·Ͱ্͛ΕΔͣͱࢥͬͨΒɺ࠷ߴ͕4m/sʹͳͬͯͨ ➤ ͜ͷลͷϝχϡʔසൟʹมΘΔͷͰҙඞཁ ➤ ʮ͚Εྑ͍ʯͷ࣌ͷใुɺͬͱਅΜதدΓʹ੍ݶͨ͠ํ͕ྑ͔ͬͨ
➤ ͦͷ্ͰɺผίʔεͰֶश͢Δͱྑ͔͔ͬͨʁ ➤ γϯϓϧͳίʔεͰεϐʔυ্͛ͯɺෳࡶͳίʔεͰ࠶ֶशͱ͔ʁ
·ͱΊͯΈΔͱ ➤ ৭ʑͳύλʔϯͰࢼͯ͠Έͳ͍ͱΑ͔͘Βͳ͍ ➤ ͰɺࠓճͷςετͰେମɺ$100͘Β͍͔͔ͬͯΔ ➤ ͕͢͞ʹ͏ࢼͤͳ͍ʢۤস ➤ ٯʹ͍͏ͱɺAIํ໘ͷεΩϧͳͯ͘؆୯ʹࢼͤΔͷྑ͍͔ ➤
ຊͱ͔ങͬͯࢼ͓͔͔ͯۚ͠Δ͠Ͷʔ ➤ AIϕϯνϟʔͬͯੌ͍͜ͱͬͯΔΜͰ͢Ͷʢ͠Έ͡Έ
·ͱΊͯΈΔͱ ຊͷࢿ·ͩ·ͩΓͯͳ͍Α͏Ͱ͢ ੌ͍ੈքͰ͢Αʂ
օ͞Μ LET’S TRY!
࠷ॳʹઓͨ࣌͠ͷ ➤ ͢ͰʹR3ͷձࣾϒϩάʹ্͕ͬͯ·͢ͷ ͰɺʮDeepRacerഊઓهʯͰݕࡧͯͩ͘͠ ͍͞ ➤ جຊతͳྲྀΕͷͱɺྉۚͷ͜ͱΛॻ͍ ͯ·͢ ➤ AWSଆឯ༨ۂં͋ͬͨͷͰɺ࠷ॳͷࠒ
ྉۚͷมಈ͕େมͰͨ͠ ➤ $300͘Β͍ٻ͕มಈͨ͠Γʢ$900 → $600ʣͱɺϗϯτɺυΩυΩͰͨ͠Αʂ એ
͋Γ͕ͱ͏ ͍͟͝·ͨ͠