Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
iPhoneで自動運転してきた
Search
Satoshi Gachi Fujimoto
February 09, 2020
Technology
0
480
iPhoneで自動運転してきた
Kumamoto HoloLens ミートアップ vol.4の資料です。
https://hololens.connpass.com/event/162325/
Satoshi Gachi Fujimoto
February 09, 2020
Tweet
Share
More Decks by Satoshi Gachi Fujimoto
See All by Satoshi Gachi Fujimoto
バスあと何分ミニサイネージ
satoshirobatofujimoto
0
31
高専で制御を、大学でセンシングを学び、次は脳みそ
satoshirobatofujimoto
0
160
画像生成AIを使って勝負しよう
satoshirobatofujimoto
1
66
ガチマナ会 vol.1
satoshirobatofujimoto
0
120
画像生成AIを使って勝負しよう
satoshirobatofujimoto
0
100
画像からプロンプトを考えて最も似ている画像を生成した人が勝ちのゲーム@AIミーティング
satoshirobatofujimoto
0
73
VPS研究者が語る”VPS概論”
satoshirobatofujimoto
0
320
画像からプロンプトを考えて最も似ている画像を生成した人が勝ちのゲーム
satoshirobatofujimoto
0
120
OpenAI 新機能まとめ(Function callingとAdd your data編)
satoshirobatofujimoto
0
190
Other Decks in Technology
See All in Technology
エンジニアの生存戦略 〜クラウド潮流の経験から紐解く技術トレンドのメカニズムと乗りこなし方〜
shimy
9
1.9k
AIアシスタントの活用で品質の向上と開発ワークフローのスピードアップ
nagix
1
210
セキュリティ研修 Day1【MIXI 24新卒技術研修】
mixi_engineers
PRO
0
160
CEL(Common Expression Language)で書いた条件にマッチしたIAM Policyを見つける / iam-policy-finder
fujiwara3
0
720
初中級者用如何使用backlog -VALE TUDOEDITION-
in0u
0
140
[NIKKEI Tech Talk] KDDI/KAG Scrum & Community for Engineering Training
curanosuke
2
220
可視化プラットフォームGrafanaの基本と活用方法の全て
hamadakoji
0
230
データベース研修 DB基礎【MIXI 24新卒技術研修】
mixi_engineers
PRO
0
220
クラウド利用者の「責任」をどう果たす?AWSセキュリティ対策のススメ #AWSSummit
hiashisan
0
280
データ分析を支える技術 生成AI再入門
ishikawa_satoru
0
380
Datadog Cloud SIEMを使ってAWS環境の脅威を可視化した話/lifeistech-datadog-cloud-siem
gidajun
0
480
LINE WORKSへ簡単通知!Incoming Webhookアプリの紹介
mmclsntr
0
110
Featured
See All Featured
Learning to Love Humans: Emotional Interface Design
aarron
269
39k
Optimising Largest Contentful Paint
csswizardry
18
2.6k
Git: the NoSQL Database
bkeepers
PRO
423
64k
Building a Modern Day E-commerce SEO Strategy
aleyda
25
6.7k
Web development in the modern age
philhawksworth
203
10k
Music & Morning Musume
bryan
43
5.9k
Adopting Sorbet at Scale
ufuk
71
8.8k
The Psychology of Web Performance [Beyond Tellerrand 2023]
tammyeverts
24
1.8k
It's Worth the Effort
3n
181
27k
Making the Leap to Tech Lead
cromwellryan
127
8.7k
The World Runs on Bad Software
bkeepers
PRO
63
11k
Bootstrapping a Software Product
garrettdimon
PRO
304
110k
Transcript
2020/02/09 Kumamoto HoloLens Meetup Vol.4 iPhoneで⾃動運転してきた
⾃⼰紹介 ガチ本 です co-founder KumaMCN ナレッジコミュニケーション R&D戦略チーム AWS ML コンピテンシーパートナー
Microsoft Mixed Reality Partner CV / SLAM / WHILL / Python satoshi.gachi.fujimoto @sotongshi
背景 • 超⾼齢社会に伴い,2025年には介護者が38万⼈不⾜する恐れ • 介護現場では,コミュニケーションロボットや⾃動運転⾞いすの導⼊が期待 出典 : 厚⽣労働省ホームページ「2025年に向けた介護⼈材にかかる需給推計(確定値)について」資料より抜粋 URL :
https://www.mhlw.go.jp/stf/houdou/0000088998.html
⽬的 • ⾃動運転技術により,⼈⼿不⾜の課題を解決 • ⼈や環境の違いをAIがサポートし,多様性社会の課題を解決 出典 : 落合陽⼀⽒のTwitterより抜粋 URL :
https://twitter.com/ochyai/status/863280246140698624/photo/1
研究実績 • 2D Lidar(測域センサ)を⽤いたSLAM • 経路計画および⾃動運転(A→B) • RGB-Dカメラを⽤いたSLAM • 衝突回避
展⽰会 ⾃動運転@超福祉展2019 CustomVisionを⽤いた⼈追従@de:code2019
システム概要(ハードウェア) • WHILL Model CR • SLAM⽤のセンサ︓Intel RealSense T265 および
D435 • 制御⽤PC(Windows10, Core i7,RAM 8GB,SSD 1TB) • ⽂字・画像表⽰⽤LED • マップ表⽰およびゴール指定⽤タブレット PCもしくはディスプレイ
システム概要(ソフトウェア) • プログラミング⾔語︓Python 3.6.9 • 主なライブラリ︓WHILL Model CR SDK,Intel RealSense
SDK,OpenCV,Open3D 初期位置推定 マップデータベース ⾃⼰位置推定 Visual Odometry ローカルマップ作成 Mapping 衝突回避 Obstacle Avoidance 経路計画 Local Path Planning ゴール指定 Global Path Planning 制御 Control
マップ作成 • SLAMによるマップ作成の様⼦
経路計画および制御 • 作成したマップから距離変換 (DistanceTransform)を⾏い,安全な経 路を抽出 • あらかじめダイクストラ法を⽤いて経路計 画を⾏い,初期位置推定で得られた位置と 指定したゴールに向かってGlobal Pathを
⽣成,⾃動運転を⾏う • Local Path上に障害物があると停⽌する ⽬的地
Azure Spatial Anchors とは︖ • 現実世界に永続的な空間アンカーを作成 • アンカーにデジタルコンテンツを表⽰ • クロスプラットフォーム
͍Θ͖ࢢདྷञҪ۠෮ڵެӦॅ
システム概要 WHILL Model CR 制御用PC iPhone GOAL Azure Spatial Anchors
START
空間をスキャン
経路を指定 1 2 3 Azure Spatial Anchors アンカーの登録
⾃動運転 1 2 3 Azure Spatial Anchors アンカーを探す
デモ • 経路指定 • ⾃動運転
まとめ • iPhoneを載せるだけで⾃動運転できた • マイ経路案内をみんなで共有するアプリとしてまずはリリースしていく
HoloLens2 体験 • ナレコムVR2 • 3Dモデルビューアー • プレイグラウンド • ⿃が寄ってくる
• アイトラッキングによるオートスクロール • ハンドトラッキングによるピアノ演奏 • Surfaces • 様々なシェーダーが楽しめる触る球体 • Graffiti 3D • 空間にお絵かき • MRTK Examples Hub • MRTKのサンプル • Type in Space • 空間に⽂字を配置
イベント告知 • 熊本GTFS-JP活⽤勉強会 vol.1 • Yo! Tech Night? 4 ⽇時
2020/3/4(⽔) 19:00-21:00 場所 えきまえスペース(熊本駅⽩川⼝前) 参加費 500円(会場代) ⽇時 2020/2/12(⽔) 19:00-21:00 場所 えきまえスペース(熊本駅⽩川⼝前) 参加費 500円(会場代)
ご清聴ありがとうございました