Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Speaker Deck
PRO
Sign in
Sign up for free
iPhoneで自動運転してきた
Satoshi Gachi Fujimoto
February 09, 2020
Technology
0
310
iPhoneで自動運転してきた
Kumamoto HoloLens ミートアップ vol.4の資料です。
https://hololens.connpass.com/event/162325/
Satoshi Gachi Fujimoto
February 09, 2020
Tweet
Share
More Decks by Satoshi Gachi Fujimoto
See All by Satoshi Gachi Fujimoto
バスあと何分ミニサイネージ
satoshirobatofujimoto
0
7
バスあと何分ミニサイネージ
satoshirobatofujimoto
0
39
こんなにオープンデータな日は初めて
satoshirobatofujimoto
0
32
最寄りのバス停にバスがあと何分で着くかだけを表示するミニサイネージを作りました
satoshirobatofujimoto
0
120
ツクレルLIVEインタビュー「最寄りのバス停にバスがあと何分で着くかだけを表示するミニサイネージを作りました」
satoshirobatofujimoto
0
40
AR/VRの活用事例と最新動向
satoshirobatofujimoto
2
310
PLATEAUのご紹介(2)
satoshirobatofujimoto
0
83
PLATEAUのご紹介
satoshirobatofujimoto
0
160
2020年の振り返り
satoshirobatofujimoto
0
190
Other Decks in Technology
See All in Technology
GitHub 엔터프라이즈 어카운트 소개 및 엔터프라이즈 서버 구축 경험
posquit0
1
140
OSINT/GEOINT ワークショップ 20220514 古橋資料
furuhashilab
2
280
220428event_overview
caddi_eng
2
210
OSS ことはじめ
hsbt
3
400
完全に理解した incremetal 〜そして、何もわからないへ〜
mashiike
0
210
ITエンジニアを取り巻く環境とキャリアパス / A career path for Japanese IT engineers
takatama
0
580
New Features in C# 10/11
chack411
0
790
Motto Go Forward スライドトップと Goを支える文化とコミュニティ してご利用ください 〜なぜ我々はコミュニティにコントリ ビュートするのか〜
luccafort
0
190
1,000万人以上が利用する「家族アルバム みてね」のSRE組織は4年間でどのように作られてきたのか/SRE NEXT 2022
isaoshimizu
4
2.7k
Adopting Kafka for the #1 job site in the world
ymyzk
1
280
20220510_簡単にできるコスト異常検出(Cost Anomaly Detection) /jaws-ug-asa-cost-anomaly-detection-20220510
emiki
2
310
Power BI Premiumでデータ準備!
hanaseleb
1
180
Featured
See All Featured
Agile that works and the tools we love
rasmusluckow
319
19k
Java REST API Framework Comparison - PWX 2021
mraible
PRO
11
4.6k
The Brand Is Dead. Long Live the Brand.
mthomps
45
2.7k
GitHub's CSS Performance
jonrohan
1020
410k
Facilitating Awesome Meetings
lara
29
3.9k
Templates, Plugins, & Blocks: Oh My! Creating the theme that thinks of everything
marktimemedia
15
910
WebSockets: Embracing the real-time Web
robhawkes
57
5k
Fantastic passwords and where to find them - at NoRuKo
philnash
25
1.5k
How To Stay Up To Date on Web Technology
chriscoyier
780
250k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
29
4.3k
Designing for Performance
lara
596
63k
In The Pink: A Labor of Love
frogandcode
130
21k
Transcript
2020/02/09 Kumamoto HoloLens Meetup Vol.4 iPhoneで⾃動運転してきた
⾃⼰紹介 ガチ本 です co-founder KumaMCN ナレッジコミュニケーション R&D戦略チーム AWS ML コンピテンシーパートナー
Microsoft Mixed Reality Partner CV / SLAM / WHILL / Python satoshi.gachi.fujimoto @sotongshi
背景 • 超⾼齢社会に伴い,2025年には介護者が38万⼈不⾜する恐れ • 介護現場では,コミュニケーションロボットや⾃動運転⾞いすの導⼊が期待 出典 : 厚⽣労働省ホームページ「2025年に向けた介護⼈材にかかる需給推計(確定値)について」資料より抜粋 URL :
https://www.mhlw.go.jp/stf/houdou/0000088998.html
⽬的 • ⾃動運転技術により,⼈⼿不⾜の課題を解決 • ⼈や環境の違いをAIがサポートし,多様性社会の課題を解決 出典 : 落合陽⼀⽒のTwitterより抜粋 URL :
https://twitter.com/ochyai/status/863280246140698624/photo/1
研究実績 • 2D Lidar(測域センサ)を⽤いたSLAM • 経路計画および⾃動運転(A→B) • RGB-Dカメラを⽤いたSLAM • 衝突回避
展⽰会 ⾃動運転@超福祉展2019 CustomVisionを⽤いた⼈追従@de:code2019
システム概要(ハードウェア) • WHILL Model CR • SLAM⽤のセンサ︓Intel RealSense T265 および
D435 • 制御⽤PC(Windows10, Core i7,RAM 8GB,SSD 1TB) • ⽂字・画像表⽰⽤LED • マップ表⽰およびゴール指定⽤タブレット PCもしくはディスプレイ
システム概要(ソフトウェア) • プログラミング⾔語︓Python 3.6.9 • 主なライブラリ︓WHILL Model CR SDK,Intel RealSense
SDK,OpenCV,Open3D 初期位置推定 マップデータベース ⾃⼰位置推定 Visual Odometry ローカルマップ作成 Mapping 衝突回避 Obstacle Avoidance 経路計画 Local Path Planning ゴール指定 Global Path Planning 制御 Control
マップ作成 • SLAMによるマップ作成の様⼦
経路計画および制御 • 作成したマップから距離変換 (DistanceTransform)を⾏い,安全な経 路を抽出 • あらかじめダイクストラ法を⽤いて経路計 画を⾏い,初期位置推定で得られた位置と 指定したゴールに向かってGlobal Pathを
⽣成,⾃動運転を⾏う • Local Path上に障害物があると停⽌する ⽬的地
Azure Spatial Anchors とは︖ • 現実世界に永続的な空間アンカーを作成 • アンカーにデジタルコンテンツを表⽰ • クロスプラットフォーム
͍Θ͖ࢢདྷञҪ۠෮ڵެӦॅ
システム概要 WHILL Model CR 制御用PC iPhone GOAL Azure Spatial Anchors
START
空間をスキャン
経路を指定 1 2 3 Azure Spatial Anchors アンカーの登録
⾃動運転 1 2 3 Azure Spatial Anchors アンカーを探す
デモ • 経路指定 • ⾃動運転
まとめ • iPhoneを載せるだけで⾃動運転できた • マイ経路案内をみんなで共有するアプリとしてまずはリリースしていく
HoloLens2 体験 • ナレコムVR2 • 3Dモデルビューアー • プレイグラウンド • ⿃が寄ってくる
• アイトラッキングによるオートスクロール • ハンドトラッキングによるピアノ演奏 • Surfaces • 様々なシェーダーが楽しめる触る球体 • Graffiti 3D • 空間にお絵かき • MRTK Examples Hub • MRTKのサンプル • Type in Space • 空間に⽂字を配置
イベント告知 • 熊本GTFS-JP活⽤勉強会 vol.1 • Yo! Tech Night? 4 ⽇時
2020/3/4(⽔) 19:00-21:00 場所 えきまえスペース(熊本駅⽩川⼝前) 参加費 500円(会場代) ⽇時 2020/2/12(⽔) 19:00-21:00 場所 えきまえスペース(熊本駅⽩川⼝前) 参加費 500円(会場代)
ご清聴ありがとうございました