Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
MetahumanSDKを使ったAIアバターを作ったよ
Search
tatsuya1970
February 15, 2025
Technology
0
170
MetahumanSDKを使ったAIアバターを作ったよ
2025.2.15 Unreal Engine Meetup Hiroshima #1
https://ue-hiroshima.connpass.com/event/338042/
tatsuya1970
February 15, 2025
Tweet
Share
More Decks by tatsuya1970
See All by tatsuya1970
#普通の文系サラリーマンチャレンジ 自分でアプリ開発と電子工作を続けたら人生が変わった
tatsuya1970
0
1.3k
ChatGPTで2時間でUEアプリを作成できるかな?
tatsuya1970
0
94
PLATEAUについて
tatsuya1970
0
74
最近急速に発展している動画生成AIの概要とデモ
tatsuya1970
0
45
生成AIはじめの一歩
tatsuya1970
0
99
技術の民主化と経営システム
tatsuya1970
0
50
生成AIはじめの一歩
tatsuya1970
1
180
普通のサラリーマンでも ここまでできた XR 体験記
tatsuya1970
0
110
生成AIでできること(2024.9.9【HiBiS】最新Techセミナー「生成AIによるビジネス活用術」)
tatsuya1970
0
140
Other Decks in Technology
See All in Technology
「最速」で Gemini CLI を使いこなそう! 〜Cloud Shell/Cloud Run の活用〜 / The Fastest Way to Master the Gemini CLI — with Cloud Shell and Cloud Run
aoto
PRO
0
140
ビズリーチ求職者検索におけるPLMとLLMの活用 / Search Engineering MEET UP_2-1
visional_engineering_and_design
1
180
「改善」ってこれでいいんだっけ?
ukigmo_hiro
0
380
Azureコストと向き合った、4年半のリアル / Four and a half years of dealing with Azure costs
aeonpeople
1
240
データ戦略部門 紹介資料
sansan33
PRO
1
3.8k
クラウドとリアルの融合により、製造業はどう変わるのか?〜クラスメソッドの製造業への取組と共に〜
hamadakoji
0
190
ローカルLLMとLINE Botの組み合わせ その2(EVO-X2でgpt-oss-120bを利用) / LINE DC Generative AI Meetup #7
you
PRO
0
130
Databricks AI/BI Genie の「値ディクショナリー」をAmazonの奥地(S3)まで見に行く
kameitomohiro
1
350
AIとともに歩んでいくデザイナーの役割の変化
lycorptech_jp
PRO
0
680
AWSでAgentic AIを開発するための前提知識の整理
nasuvitz
2
230
CREが作る自己解決サイクルSlackワークフローに組み込んだAIによる社内ヘルプデスク改革 #cre_meetup
bengo4com
0
110
現場データから見える、開発生産性の変化コード生成AI導入・運用のリアル〜 / Changes in Development Productivity and Operational Challenges Following the Introduction of Code Generation AI
nttcom
1
400
Featured
See All Featured
KATA
mclloyd
PRO
32
15k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
12
1.2k
Gamification - CAS2011
davidbonilla
81
5.5k
Building Flexible Design Systems
yeseniaperezcruz
329
39k
The Straight Up "How To Draw Better" Workshop
denniskardys
238
140k
Bootstrapping a Software Product
garrettdimon
PRO
307
110k
Chrome DevTools: State of the Union 2024 - Debugging React & Beyond
addyosmani
9
920
ピンチをチャンスに:未来をつくるプロダクトロードマップ #pmconf2020
aki_iinuma
127
54k
Java REST API Framework Comparison - PWX 2021
mraible
34
8.9k
Imperfection Machines: The Place of Print at Facebook
scottboms
269
13k
A Modern Web Designer's Workflow
chriscoyier
697
190k
The Success of Rails: Ensuring Growth for the Next 100 Years
eileencodes
46
7.7k
Transcript
MetahumanSDKを使ったAIアバターを作ったよ 武村達也 2025.2.15 Unreal Engine Meetup Hiroshima #1
自己紹介 武村達也 某ITコンサル会社勤務 非エンジニア (前職は某地方銀行30年) @tatsuya1970 ・文系ですが、 趣味でゲームや電子工作を作成 ・ハッカソンに約20回参加 入賞多数
・趣味は、リツイート
Unreal Engineを始めたきっかけ
国土交通省 PLATEAU(プラトー)
PLATEAUの広島市紙屋町近辺のデータを フォートナイトへ (島コード 8767-5832-9806) https://youtu.be/QUnpZmurgF0 当日は動画を流しました。 ※動画は右QRコード、 または下URLから
本題
作ったもの AIアバター 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/xlWKQUQ0rg8
経緯
昔、Unity + Live2Dで自分のアバター作成 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/6WbgKR_PspA
その作成方法を技術ブログ(Qiita)に公開したところ https://qiita.com/tatsuya1970/items/d2d3e460cf310957e2f0
お仕事が舞い込んできた(副業) オーダー:案件化前の技術検証 ・フォトリアルな受付AI ・リップシンク ・ウェブで動く
Live2D 商用利用はいろいろ大変らしいので却下
生成AI 「HeyGen」 API利用金額が高そうなので却下 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/yc_FrwIQiJY
Character Creator なぜかUnityにアップすると劣化したので却下
Blenderの何かのプラグイン 不気味の谷を越えられないので却下
AVATAR SDK これも不気味の谷を越えられないので却下
Unityのアセット「AVATAR MAKER」 これも不気味の谷を越えられないので却下
Unity + WebGL そもそもマイクに対応してないことが判明し 却下 ※当日参加者の方から指摘があり、 もしかしたら、対応するかも。
Unreal Engine + Metahuman + WebGL UE5では対応してない UE4にダウングレードするもスタック WebGL はあきらめる
Unreal Engine + Metahuman + Pixel Streaming
Omniverse Audio2Face (自分のPCのスペックではすぐフリーズ) UE5からPythonを実行 PythonでOpenAIのWhisperAPIを利用 プラグイン:Runtime Speech Recognizer いろいろ試行錯誤するも、うまくいかない
Google Speech Kit これでうまく行った!
ブループリント
できた!! https://youtu.be/xlWKQUQ0rg8
作成方法はこちら https://note.com/project_design/n/n184e226183c5
ありがとうございました