Upgrade to Pro — share decks privately, control downloads, hide ads and more …

SSII2023 [OS1] マルチモーダル情報処理の最前線

画像センシングシンポジウム
PRO
June 14, 2023
Science
0
690

SSII2023 [OS1] マルチモーダル情報処理の最前線

菅沼雅徳（東北⼤学）

画像センシングシンポジウム
PRO

June 14, 2023
Tweet

More Decks by 画像センシングシンポジウム

See All by 画像センシングシンポジウム
SSII2024 [OS1] 自動運転における 重要技術とトレンド紹介
ssii
PRO
0
870
SSII2024 [PD] SSIIアナザーストーリーズ
ssii
PRO
0
250
SSII2024 [OS1] 画像生成技術の発展： 過去10年の軌跡と未来への展望
ssii
PRO
3
2.3k
SSII2024 [OS1] 現場の課題を解決する ロボットラーニング
ssii
PRO
0
720
SSII2024 [OS1] 画像認識におけるモデル・データの共進化
ssii
PRO
0
620
SSII2024 [OS1] 研究紹介100連発（オープンニング）
ssii
PRO
0
590
SSII2024 [OS2] 大規模言語モデルと基盤モデルの射程
ssii
PRO
0
590
SSII2024 [OS2] 画像、その先へ 〜モーション解析への誘い〜
ssii
PRO
1
1.3k
SSII2024 [OS2] 大規模言語モデルとVision & Languageのこれから
ssii
PRO
5
1.6k

Other Decks in Science

See All in Science
The thin line between reconstruction, classification, and hallucination in brain decoding
ykamit
1
1.1k
ほたるのひかり/RayTracingCamp10
kugimasa
0
480
Improving Search @scale with efficient query experimentation @BerlinBuzzwords 2024
searchhub
0
270
Snowflakeによる統合バイオインフォマティクス
ktatsuya
PRO
0
570
Planted Clique Conjectures are Equivalent
nobushimi
0
100
ガウス過程回帰とベイズ最適化
nearme_tech
PRO
1
130
Pericarditis Comic
camkdraws
0
1.5k
最適化超入門
tkm2261
14
3.4k
山形とさくらんぼに関するレクチャー(YG-900)
07jp27
1
250
白金鉱業Meetup Vol.16_数理最適化案件のはじめかた・すすめかた
brainpadpr
3
1.3k
学術講演会中央大学学員会大分支部
tagtag
0
110
【健康&筋肉と生産性向上の関連性】 【Google Cloudを企業で運用する際の知識】 をお届け
yasumuusan
0
430

Featured

See All Featured
Optimizing for Happiness
mojombo
376
70k
Designing for Performance
lara
604
68k
Sharpening the Axe: The Primacy of Toolmaking
bcantrill
39
1.9k
Dealing with People You Can't Stand - Big Design 2015
cassininazir
365
25k
Making the Leap to Tech Lead
cromwellryan
133
9k
ピンチをチャンスに：未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
113
50k
For a Future-Friendly Web
brad_frost
176
9.5k
Improving Core Web Vitals using Speculation Rules API
sergeychernyshev
6
210
Large-scale JavaScript Application Architecture
addyosmani
510
110k
jQuery: Nuts, Bolts and Bling
dougneiner
63
7.6k
Reflections from 52 weeks, 52 projects
jeffersonlam
348
20k
GraphQLの誤解/rethinking-graphql
sonatard
68
10k

Transcript

  1. マルチモーダル情報処理の最前線 2023.6.14 菅沼 雅徳（東北⼤学）

  2. 複数のモダリティを統合的に扱うこと • モダリティの例：画像，⾔語，⾳声，様々なメタデータ，... 2 マルチモーダル情報処理？ マルチモーダル情報処理は世の中でありふれた情報処理 プレゼン 視覚，⾳声，テキスト... ソーシャルメディア Webページ，広告，SNS...

    ࢦࣔ ʢจষʣ ճ౴ ʢจষʣ GPT-4 https://openai.com/research/gpt-4

  3. マルチモーダルだからこそわかること 〜マルチモーダルで⼈の感性を紐解く〜 • ⼭﨑俊彦 ⽒（東京⼤学） 3 マルチモーダル情報処理の最前線 グラフィックデザインとマルチモーダル処理 • ⼭⼝光太

    ⽒（CyberAgent AI Lab） GPT-4とVision-and-Languageの未来 • ⻄⽥京介 ⽒（NTT⼈間情報研究所）