Upgrade to Pro — share decks privately, control downloads, hide ads and more …

SSII2023 [OS1] マルチモーダル情報処理の最前線

画像センシングシンポジウム
PRO
June 14, 2023
Science
0
630

SSII2023 [OS1] マルチモーダル情報処理の最前線

菅沼雅徳（東北⼤学）

画像センシングシンポジウム
PRO

June 14, 2023
Tweet

More Decks by 画像センシングシンポジウム

See All by 画像センシングシンポジウム
SSII2024 [OS1] 自動運転における 重要技術とトレンド紹介
ssii
PRO
0
670
SSII2024 [PD] SSIIアナザーストーリーズ
ssii
PRO
0
190
SSII2024 [OS1] 画像生成技術の発展： 過去10年の軌跡と未来への展望
ssii
PRO
3
1.9k
SSII2024 [OS1] 現場の課題を解決する ロボットラーニング
ssii
PRO
0
550
SSII2024 [OS1] 画像認識におけるモデル・データの共進化
ssii
PRO
0
490
SSII2024 [OS1] 研究紹介100連発（オープンニング）
ssii
PRO
0
480
SSII2024 [OS2] 大規模言語モデルと基盤モデルの射程
ssii
PRO
0
490
SSII2024 [OS2] 画像、その先へ 〜モーション解析への誘い〜
ssii
PRO
1
1.2k
SSII2024 [OS2] 大規模言語モデルとVision & Languageのこれから
ssii
PRO
5
1.4k

Other Decks in Science

See All in Science
LIMEを用いた判断根拠の可視化
kentaitakura
0
290
Raccoon Roundworm
uni_of_nomi
0
140
学術講演会中央大学学員会八王子支部
tagtag
0
210
WeMeet Group - 採用資料
wemeet
0
2.6k
論文紹介: PEFA: Parameter-Free Adapters for Large-scale Embedding-based Retrieval Models (WSDM 2024)
ynakano
0
130
私たちのプロダクトにとってのよいテスト/good test for our products
camel_404
0
120
Machine Learning for Materials (Lecture 6)
aronwalsh
0
500
Boil Order
uni_of_nomi
0
110
Mechanistic Interpretability の紹介
sohtakahashi
0
260
インフラだけではない MLOps の話 @事例でわかるMLOps 機械学習の成果をスケールさせる処方箋 発売記念
icoxfog417
2
430
Running llama.cpp on the CPU
ianozsvald
0
370
Machine Learning for Materials (Lecture 1)
aronwalsh
1
1.9k

Featured

See All Featured
How STYLIGHT went responsive
nonsquared
95
5.1k
Documentation Writing (for coders)
carmenintech
65
4.3k
Facilitating Awesome Meetings
lara
49
6k
How to Ace a Technical Interview
jacobian
275
23k
The Invisible Customer
myddelton
119
13k
ReactJS: Keep Simple. Everything can be a component!
pedronauck
664
120k
In The Pink: A Labor of Love
frogandcode
139
22k
It's Worth the Effort
3n
183
27k
Web Components: a chance to create the future
zenorocha
310
42k
Being A Developer After 40
akosma
84
590k
Writing Fast Ruby
sferik
626
60k
GraphQLの誤解/rethinking-graphql
sonatard
65
9.9k

Transcript

  1. マルチモーダル情報処理の最前線 2023.6.14 菅沼 雅徳（東北⼤学）

  2. 複数のモダリティを統合的に扱うこと • モダリティの例：画像，⾔語，⾳声，様々なメタデータ，... 2 マルチモーダル情報処理？ マルチモーダル情報処理は世の中でありふれた情報処理 プレゼン 視覚，⾳声，テキスト... ソーシャルメディア Webページ，広告，SNS...

    ࢦࣔ ʢจষʣ ճ౴ ʢจষʣ GPT-4 https://openai.com/research/gpt-4

  3. マルチモーダルだからこそわかること 〜マルチモーダルで⼈の感性を紐解く〜 • ⼭﨑俊彦 ⽒（東京⼤学） 3 マルチモーダル情報処理の最前線 グラフィックデザインとマルチモーダル処理 • ⼭⼝光太

    ⽒（CyberAgent AI Lab） GPT-4とVision-and-Languageの未来 • ⻄⽥京介 ⽒（NTT⼈間情報研究所）