Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
ロボット分野で使われる生成AIについて調べてみた.pdf
Search
AGIRobots
August 27, 2024
1
250
ロボット分野で使われる生成AIについて調べてみた.pdf
「製造業でも生成AI活用したい!名古屋LLM MeetUp #2」での発表資料です。
AGIRobots
August 27, 2024
Tweet
Share
More Decks by AGIRobots
See All by AGIRobots
世界モデルによる4脚ロボットの歩行学習
robots
1
4.1k
Featured
See All Featured
Stop Working from a Prison Cell
hatefulcrawdad
270
20k
Evolution of real-time – Irina Nazarova, EuRuKo, 2024
irinanazarova
8
800
Helping Users Find Their Own Way: Creating Modern Search Experiences
danielanewman
29
2.7k
Learning to Love Humans: Emotional Interface Design
aarron
273
40k
The Cult of Friendly URLs
andyhume
79
6.5k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
48
5.4k
Visualization
eitanlees
146
16k
Practical Orchestrator
shlominoach
188
11k
How GitHub (no longer) Works
holman
314
140k
Done Done
chrislema
184
16k
Why Our Code Smells
bkeepers
PRO
337
57k
Product Roadmaps are Hard
iamctodd
PRO
54
11k
Transcript
ロボット分野で使われる 生成AIについて調べてみた (+αで未来の話も)
自己紹介 • 氏名:赤見坂篤記 • 所属:名古屋大学大学院情報学研究科 • 趣味:ロボット開発 ヒューマノイドロボットを 個人開発してます! •
最近のニュース: Station Aiに入居できた!
一般的にいわれる生成AIとは 生成AI Aa (代表サービス) ChatGPT Stable Diffusion Voice Engine プロンプト
LLM, VLM, 拡散モデル, マルチモーダル 基盤モデル, etc… テキストプロンプト, 画像プロンプト, 音声プロンプト, etc…
一般的にいわれる生成AIとは 生成AI Aa (代表サービス) ChatGPT Stable Diffusion Voice Engine プロンプト
LLM, VLM, 拡散モデル, マルチモーダル 基盤モデル, etc… テキストプロンプト, 画像プロンプト, 音声プロンプト, etc… 行動(Action)が 含まれていない
ロボットで使われる生成AI 生成AI Aa プロンプト LLM, VLM, VLAM 拡散モデル, マルチモーダル 基盤モデル,
etc… テキストプロンプト, 画像プロンプト, 音声プロンプト, センサ情報, etc… (無い場合も) 話す 動く
遠隔操作データを用いてAIを学習 • 大規模言語モデルの仕組みと 同様の要領で動作系列を学習 • エキスパートによる遠隔操作 データが50個ほどあれば 十分な精度が出る • カメラ情報も学習に含める
ことで臨機応変な動作が可能 https://youtu.be/4VfNskoPUZg?si=Uz9gd7odgiqeySYB
DENSO WAVEのAI模倣学習 https://youtu.be/wZBAZGH6JUw?si=g4j_NykFP4Mas7lY
この流れはヒューマノイドロボットへ
具体的に何ができる? https://youtu.be/Sq1QZB5baNw?si=ZKARj7YmxC70pp6z
具体的に何ができる? https://youtu.be/q8IdbodRG14?si=_g9Z2WeJMTna268U
ようするに? • 製造業で生成AIにより大きく変わるのはこれから 製造業が強い愛知県だからこそ・・・ • この世界的な流れに後れをとるわけにはいかない!