Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
DeepRacerに挑戦してみた
Search
okiyasu
November 23, 2019
Programming
0
170
DeepRacerに挑戦してみた
DeepRacerを色々とやってみたという話
okiyasu
November 23, 2019
Tweet
Share
More Decks by okiyasu
See All by okiyasu
kintone Café 愛媛 Vol.15 KOUTEI
okiyasu
0
73
kintone Café 愛媛 Vol.14 ハンズオン
okiyasu
0
460
re:Invent2019報告
okiyasu
0
210
IoT時代のレコード管理を考える
okiyasu
0
310
これからの『モバイル版のアプリ作成』を語ろう
okiyasu
0
420
kintoneの新モバイルUIが活きるレスポンシブなポータル作成
okiyasu
0
620
仕込むと楽しいkintoneの通知機能
okiyasu
0
310
『俺が「気をつけて作業する」 なんて出来るわけがない』 からのライセンス発行作業
okiyasu
0
620
「お前のコレクションを売ってくれ」から始まる課金実装
okiyasu
0
39
Other Decks in Programming
See All in Programming
イベントストーミング図からコードへの変換手順 / Procedure for Converting Event Storming Diagrams to Code
nrslib
1
550
AIエージェントはこう育てる - GitHub Copilot Agentとチームの共進化サイクル
koboriakira
0
480
PHPで始める振る舞い駆動開発(Behaviour-Driven Development)
ohmori_yusuke
2
230
C++20 射影変換
faithandbrave
0
550
High-Level Programming Languages in AI Era -Human Thought and Mind-
hayat01sh1da
PRO
0
640
Azure AI Foundryではじめてのマルチエージェントワークフロー
seosoft
0
150
来たるべき 8.0 に備えて React 19 新機能と React Router 固有機能の取捨選択とすり合わせを考える
oukayuka
2
880
datadog dash 2025 LLM observability for reliability and stability
ivry_presentationmaterials
0
330
NPOでのDevinの活用
codeforeveryone
0
480
アンドパッドの Go 勉強会「 gopher 会」とその内容の紹介
andpad
0
280
Discover Metal 4
rei315
2
110
既存デザインを変更せずにタップ領域を広げる方法
tahia910
1
240
Featured
See All Featured
It's Worth the Effort
3n
185
28k
Intergalactic Javascript Robots from Outer Space
tanoku
271
27k
Designing Experiences People Love
moore
142
24k
Optimizing for Happiness
mojombo
379
70k
Thoughts on Productivity
jonyablonski
69
4.7k
Music & Morning Musume
bryan
46
6.6k
Visualization
eitanlees
146
16k
How to Think Like a Performance Engineer
csswizardry
24
1.7k
We Have a Design System, Now What?
morganepeng
53
7.7k
Responsive Adventures: Dirty Tricks From The Dark Corners of Front-End
smashingmag
252
21k
Designing for Performance
lara
609
69k
Code Review Best Practice
trishagee
69
18k
Transcript
DeepRacerʹઓͯ͠Έͨʂ START YOUR ENGINE!! 2019/11/23 ࢛ࠃΫϥυ͓ว࿏2019 ಙౡ JAWS-UG Ѫඤɹԭ ོ҆
ࣗݾհ ݩεʔύʔܦӦ ࣮Ո +"846(Ѫඤ LJOUPOF$BGÉѪඤ 5XJMJP+16(Ѫඤ ͘͞ΒΫϥϒѪඤ 403"$0.6(4IJLPLV +1@4USJQFT
ۀϋοΫ ݿ൪ಓࢣʢఱ࠽ೝఆূ൪อ༗ʣ αΠϘζެೝLJOUPOFΤόϯδΣϦετ LJOUPOF"TTPDJBUF LJOUPOF"QQ%FTJHO4QFDJBMJTU LJOUPOF$VTUPNJ[BUJPO4QFDJBMJTU "84ೝఆιϦϡʔγϣϯΞʔΩςΫτrΞιγΤΠτ "84ೝఆσϕϩούʔrΞιγΤΠτ ԭོ҆ʢ͓͖͔ͨ͢ʣ
དྷिɺre:Invent2019ʹߦ͖·͢ʢ4ճʣ
DeepRacerͬͯͬͯ·͢ʁ ➤ લʹΧϝϥ͕͍ͯͯɺը૾Λݟͯίʔ εΛΓ·͢ ➤ ڧԽֶशͱ͍͏ΈͰΓํΛ֮͑· ͢ ➤ ֶशͷΓํγϯϓϧɻifͱܭࢉ͕ࣜ ॻ͚ΕेͰ͢
➤ ཪଆͷ໘ͳ͜ͱAWS DeepRacerଆͰ ͬͯ͘Ε·͢ ➤ λΠϜ͕ग़ͯɺੈքதͰڝ૪ʹͳΔͷͰ ͘ͳΓ·͢ʂ
Ϙλϯ̍ͭͰ͜Μͳߏ͕ࣗಈͰ࡞͞Ε·͢
Կ͕ྑ͍͔ͱ͍͏ͱ ➤ ࢼͦ͏ͱͯ͠ɺಈ࡞͢ΔڥΛߏங͢Δஈ֊Ͱ͏·͍͔ͣ͘࠳ં͢Δ ➤ खॻ͖จࣈೝࣝΈ͍ͨͳͭͩͱʮͬͯΈͨʯͰऴΘͬͪΌ͏ ➤ ϋϯζΦϯͰࢼ͕ͨ͠ɺͦͷ࣍ʹվྑ͠Α͏ʹํ๏͕Θ͔Βͳ͍ ➤ ڥɺϘλϯΛԡ͚ͩ͢Ͱࣗಈ࡞ ➤
αϯϓϧͰ؆୯ʹࢼͤΔ͠ɺλΠϜͰ༏ྼ͕؆୯ʹΘ͔Δ ➤ ධՁؔΛࣗ༝ʹมߋͯ͠ࢼͤΔ DeepRacerͩͱ ࠓ·Ͱ
ࢼ͞ͳ͍ͱ ͍ͬͨͳ͍ʂ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢಈ͖ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ
େମͷྲྀΕ ➤ ࡞Ϟσϧͷ໊લͱίʔεΛܾΊΔ ➤ Action spaceʢͲ͏ಈ͔͘ͷΈ߹ΘͤʣΛબ ➤ Reward functionʢใुؔʣΛ࡞ ➤
HyperparametersʢৄࡉઃఆʣΛܾఆ ➤ ֶश࣌ؒΛܾఆ ͳ͓ɺ࡞ͨ͠ϞσϧΛݩʹ࠶ֶश͢Δ߹ɺ Action space͚ͩมߋͰ͖·ͤΜʢͳͥॏཁͳͷ͔ޙड़ʣ ॏཁʂʂ
ࠓճͷ ֶशํ…
WAYPOINTௐࠪͱ͔ ंͷ͖ͱ͔
ͳΜͯͷࢭΊͯ Ͱ͖Δ͚ͩγϯϓϧʹ
ਅΜதΔ
͚Εྑ͍
࠶ֶशΛࢼ͢
ਅΜதΔ ͚Εྑ͍ ࠶ֶशΛࢼ͢
େମɺ͜Μͳઃఆ
ਅΜதΔ ͪΌΜͱΰʔϧͯ͠Δʂ
͚Εྑ͍ ̍ඵॖͨ͠ʂ ͬͱ͍͚Δ͔ʂʂ
࠶ֶशΛࢼ͢ ഁͨ͠ʢྦ
ํੑؒҧ͑Δͱ ࠶ֶशͯ͠ ݁Ռग़ͳ͍
·ͱΊͯΈΔͱ ➤ ࠷େεϐʔυ͕ɹ6m/s ͩͬͨͷͰɺͬͱͯ͘ྑ͔ͬͨ ➤ ͔֬ɺ12m/s·Ͱ্͛ΕΔͣͱࢥͬͨΒɺ࠷ߴ͕4m/sʹͳͬͯͨ ➤ ͜ͷลͷϝχϡʔසൟʹมΘΔͷͰҙඞཁ ➤ ʮ͚Εྑ͍ʯͷ࣌ͷใुɺͬͱਅΜதدΓʹ੍ݶͨ͠ํ͕ྑ͔ͬͨ
➤ ͦͷ্ͰɺผίʔεͰֶश͢Δͱྑ͔͔ͬͨʁ ➤ γϯϓϧͳίʔεͰεϐʔυ্͛ͯɺෳࡶͳίʔεͰ࠶ֶशͱ͔ʁ
·ͱΊͯΈΔͱ ➤ ৭ʑͳύλʔϯͰࢼͯ͠Έͳ͍ͱΑ͔͘Βͳ͍ ➤ ͰɺࠓճͷςετͰେମɺ$100͘Β͍͔͔ͬͯΔ ➤ ͕͢͞ʹ͏ࢼͤͳ͍ʢۤস ➤ ٯʹ͍͏ͱɺAIํ໘ͷεΩϧͳͯ͘؆୯ʹࢼͤΔͷྑ͍͔ ➤
ຊͱ͔ങͬͯࢼ͓͔͔ͯۚ͠Δ͠Ͷʔ ➤ AIϕϯνϟʔͬͯੌ͍͜ͱͬͯΔΜͰ͢Ͷʢ͠Έ͡Έ
·ͱΊͯΈΔͱ ຊͷࢿ·ͩ·ͩΓͯͳ͍Α͏Ͱ͢ ੌ͍ੈքͰ͢Αʂ
օ͞Μ LET’S TRY!
࠷ॳʹઓͨ࣌͠ͷ ➤ ͢ͰʹR3ͷձࣾϒϩάʹ্͕ͬͯ·͢ͷ ͰɺʮDeepRacerഊઓهʯͰݕࡧͯͩ͘͠ ͍͞ ➤ جຊతͳྲྀΕͷͱɺྉۚͷ͜ͱΛॻ͍ ͯ·͢ ➤ AWSଆឯ༨ۂં͋ͬͨͷͰɺ࠷ॳͷࠒ
ྉۚͷมಈ͕େมͰͨ͠ ➤ $300͘Β͍ٻ͕มಈͨ͠Γʢ$900 → $600ʣͱɺϗϯτɺυΩυΩͰͨ͠Αʂ એ
͋Γ͕ͱ͏ ͍͟͝·ͨ͠