SSII2023 [OS1] マルチモーダル情報処理の最前線

画像センシングシンポジウム

June 14, 2023

Science

700

SSII2023 [OS1] マルチモーダル情報処理の最前線

菅沼雅徳（東北⼤学）

画像センシングシンポジウム
PRO

June 14, 2023

Tweet

More Decks by 画像センシングシンポジウム

See All by 画像センシングシンポジウム

SSII2024 [OS1] 自動運転における重要技術とトレンド紹介

0

960

SSII2024 [PD] SSIIアナザーストーリーズ

0

260

SSII2024 [OS1] 画像生成技術の発展：過去10年の軌跡と未来への展望

3

2.4k

SSII2024 [OS1] 現場の課題を解決するロボットラーニング

0

770

SSII2024 [OS1] 画像認識におけるモデル・データの共進化

0

740

SSII2024 [OS1] 研究紹介100連発（オープンニング）

0

610

SSII2024 [OS2] 大規模言語モデルと基盤モデルの射程

0

630

SSII2024 [OS2] 画像、その先へ〜モーション解析への誘い〜

1

1.4k

SSII2024 [OS2] 大規模言語モデルとVision & Languageのこれから

5

1.6k

Other Decks in Science

See All in Science

The Incredible Machine: Developer Productivity and the Impact of AI

0

570

Design of three-dimensional binary manipulators for pick-and-place task avoiding obstacles (IECON2024)

0

140

butterfly_effect/butterfly_effect_in-house

1

150

0

160

学術講演会中央大学学員会大分支部

0

120

インフラだけではない MLOps の話 @事例でわかるMLOps 機械学習の成果をスケールさせる処方箋発売記念

2

720

Machine Learning for Materials (Challenge)

0

230

ベイズ最適化をゼロから

2

1.1k

解説！データ基盤の進化を後押しする手順とタイミング

1

410

地表面抽出の方法であるSMRFについて紹介

1

350

Valuable Lessons Learned on Kaggle’s ARC AGI LLM Challenge (PyDataGlobal 2024)

0

250

応用心理学Ⅰテキストマイニング講義資料講義編(2024年度)

0

110

Featured

See All Featured

Music & Morning Musume

46

6.4k

Let's Do A Bunch of Simple Stuff to Make Websites Faster

507

140k

個人開発の失敗を避けるイケてる考え方 / tips for indie hackers

100

18k

Adopting Sorbet at Scale

75

9.2k

459

140k

A Modern Web Designer's Workflow

693

190k

Git: the NoSQL Database

429

65k

Agile that works and the tools we love

328

21k

The Success of Rails: Ensuring Growth for the Next 100 Years

44

7.1k

Why You Should Never Use an ORM

55

9.2k

87

9.5k

26

5.2k

Transcript

マルチモーダル情報処理の最前線 2023.6.14 菅沼雅徳（東北⼤学）
複数のモダリティを統合的に扱うこと • モダリティの例：画像，⾔語，⾳声，様々なメタデータ，... 2 マルチモーダル情報処理？マルチモーダル情報処理は世の中でありふれた情報処理プレゼン視覚，⾳声，テキスト... ソーシャルメディア Webページ，広告，SNS...
ࢦࣔ ʢจষʣ ճ౴ ʢจষʣ GPT-4 https://openai.com/research/gpt-4
マルチモーダルだからこそわかること〜マルチモーダルで⼈の感性を紐解く〜 • ⼭﨑俊彦⽒（東京⼤学） 3 マルチモーダル情報処理の最前線グラフィックデザインとマルチモーダル処理 • ⼭⼝光太
⽒（CyberAgent AI Lab） GPT-4とVision-and-Languageの未来 • ⻄⽥京介⽒（NTT⼈間情報研究所）