Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
MetahumanSDKを使ったAIアバターを作ったよ
Search
tatsuya1970
February 15, 2025
Technology
0
170
MetahumanSDKを使ったAIアバターを作ったよ
2025.2.15 Unreal Engine Meetup Hiroshima #1
https://ue-hiroshima.connpass.com/event/338042/
tatsuya1970
February 15, 2025
Tweet
Share
More Decks by tatsuya1970
See All by tatsuya1970
#普通の文系サラリーマンチャレンジ 自分でアプリ開発と電子工作を続けたら人生が変わった
tatsuya1970
0
730
ChatGPTで2時間でUEアプリを作成できるかな?
tatsuya1970
0
52
PLATEAUについて
tatsuya1970
0
74
最近急速に発展している動画生成AIの概要とデモ
tatsuya1970
0
44
生成AIはじめの一歩
tatsuya1970
0
97
技術の民主化と経営システム
tatsuya1970
0
49
生成AIはじめの一歩
tatsuya1970
1
180
普通のサラリーマンでも ここまでできた XR 体験記
tatsuya1970
0
110
生成AIでできること(2024.9.9【HiBiS】最新Techセミナー「生成AIによるビジネス活用術」)
tatsuya1970
0
130
Other Decks in Technology
See All in Technology
自作LLM Native GORM Pluginで実現する AI Agentバックテスト基盤構築
po3rin
2
200
DEFCON CHV CTF 2025 Write-up
bata_24
0
190
FastAPIの魔法をgRPC/Connect RPCへ
monotaro
PRO
0
450
研究開発部メンバーの働き⽅ / Sansan R&D Profile
sansan33
PRO
3
20k
今日から始めるpprof / Pprof workshop for beginners
ymotongpoo
6
760
2025-09-25 SRETT #13 ConftestによるTerraformのPolicy as Codeを試してみる
masasuzu
0
130
PLaMoの事後学習を支える技術 / PFN LLMセミナー
pfn
PRO
6
1.8k
BirdCLEF+2025 Noir 5位解法紹介
myso
0
120
What is BigQuery?
aizack_harks
0
110
Tomorrow graphlib, Let us use everybody
hayaosuzuki
0
140
「技術負債にならない・間違えない」 権限管理の設計と実装
naro143
31
9.2k
stupid jj tricks
indirect
0
7.3k
Featured
See All Featured
The Pragmatic Product Professional
lauravandoore
36
6.9k
JavaScript: Past, Present, and Future - NDC Porto 2020
reverentgeek
52
5.6k
10 Git Anti Patterns You Should be Aware of
lemiorhan
PRO
657
61k
Understanding Cognitive Biases in Performance Measurement
bluesmoon
29
2.6k
Learning to Love Humans: Emotional Interface Design
aarron
274
40k
What's in a price? How to price your products and services
michaelherold
246
12k
Balancing Empowerment & Direction
lara
4
660
KATA
mclloyd
32
14k
[Rails World 2023 - Day 1 Closing Keynote] - The Magic of Rails
eileencodes
36
2.5k
Visualization
eitanlees
148
16k
Faster Mobile Websites
deanohume
310
31k
How to Ace a Technical Interview
jacobian
280
23k
Transcript
MetahumanSDKを使ったAIアバターを作ったよ 武村達也 2025.2.15 Unreal Engine Meetup Hiroshima #1
自己紹介 武村達也 某ITコンサル会社勤務 非エンジニア (前職は某地方銀行30年) @tatsuya1970 ・文系ですが、 趣味でゲームや電子工作を作成 ・ハッカソンに約20回参加 入賞多数
・趣味は、リツイート
Unreal Engineを始めたきっかけ
国土交通省 PLATEAU(プラトー)
PLATEAUの広島市紙屋町近辺のデータを フォートナイトへ (島コード 8767-5832-9806) https://youtu.be/QUnpZmurgF0 当日は動画を流しました。 ※動画は右QRコード、 または下URLから
本題
作ったもの AIアバター 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/xlWKQUQ0rg8
経緯
昔、Unity + Live2Dで自分のアバター作成 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/6WbgKR_PspA
その作成方法を技術ブログ(Qiita)に公開したところ https://qiita.com/tatsuya1970/items/d2d3e460cf310957e2f0
お仕事が舞い込んできた(副業) オーダー:案件化前の技術検証 ・フォトリアルな受付AI ・リップシンク ・ウェブで動く
Live2D 商用利用はいろいろ大変らしいので却下
生成AI 「HeyGen」 API利用金額が高そうなので却下 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/yc_FrwIQiJY
Character Creator なぜかUnityにアップすると劣化したので却下
Blenderの何かのプラグイン 不気味の谷を越えられないので却下
AVATAR SDK これも不気味の谷を越えられないので却下
Unityのアセット「AVATAR MAKER」 これも不気味の谷を越えられないので却下
Unity + WebGL そもそもマイクに対応してないことが判明し 却下 ※当日参加者の方から指摘があり、 もしかしたら、対応するかも。
Unreal Engine + Metahuman + WebGL UE5では対応してない UE4にダウングレードするもスタック WebGL はあきらめる
Unreal Engine + Metahuman + Pixel Streaming
Omniverse Audio2Face (自分のPCのスペックではすぐフリーズ) UE5からPythonを実行 PythonでOpenAIのWhisperAPIを利用 プラグイン:Runtime Speech Recognizer いろいろ試行錯誤するも、うまくいかない
Google Speech Kit これでうまく行った!
ブループリント
できた!! https://youtu.be/xlWKQUQ0rg8
作成方法はこちら https://note.com/project_design/n/n184e226183c5
ありがとうございました