Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
MetahumanSDKを使ったAIアバターを作ったよ
Search
tatsuya1970
February 15, 2025
Technology
0
150
MetahumanSDKを使ったAIアバターを作ったよ
2025.2.15 Unreal Engine Meetup Hiroshima #1
https://ue-hiroshima.connpass.com/event/338042/
tatsuya1970
February 15, 2025
Tweet
Share
More Decks by tatsuya1970
See All by tatsuya1970
最近急速に発展している動画生成AIの概要とデモ
tatsuya1970
0
37
生成AIはじめの一歩
tatsuya1970
0
84
技術の民主化と経営システム
tatsuya1970
0
41
生成AIはじめの一歩
tatsuya1970
1
160
普通のサラリーマンでも ここまでできた XR 体験記
tatsuya1970
0
100
生成AIでできること(2024.9.9【HiBiS】最新Techセミナー「生成AIによるビジネス活用術」)
tatsuya1970
0
120
PLATEAUと私
tatsuya1970
0
120
普通のサラリーマンが社外でアウトプットを続けていたら、いつの間にかコミュニティマネージャーとして転職した話
tatsuya1970
0
150
AI Texture Generator
tatsuya1970
0
160
Other Decks in Technology
See All in Technology
「AI駆動開発」のボトルネック『言語化』を効率化するには
taniiicom
1
200
ecspressoの設計思想に至る道 / sekkeinight2025
fujiwara3
12
2k
「手を動かした者だけが世界を変える」ソフトウェア開発だけではない開発者人生
onishi
15
7.1k
増え続ける脆弱性に立ち向かう: 事前対策と優先度づけによる 持続可能な脆弱性管理 / Confronting the Rise of Vulnerabilities: Sustainable Management Through Proactive Measures and Prioritization
nttcom
1
200
(HackFes)米国国防総省のDevSecOpsライフサイクルをAWSのセキュリティサービスとOSSで実現
syoshie
5
670
みんな Kiro ってる?
r3_yamauchi
PRO
0
120
AI人生苦節10年で会得したAIがやること_人間がやること.pdf
shibuiwilliam
1
120
TypeScript 上達の道
ysknsid25
21
4.6k
QuickBooks®️ Customer®️ USA Contact Numbers: Complete 2025 Support Guide
qbsupportinfo
0
130
クマ×共生 HACKATHON - 熊対策を『特別な行動」から「生活の一部」に -
pharaohkj
0
150
大規模イベントを支える ABEMA の アーキテクチャ 変遷 2025
nagapad
3
280
Wasmで社内ツールを作って配布しよう
askua
0
150
Featured
See All Featured
Imperfection Machines: The Place of Print at Facebook
scottboms
267
13k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
331
22k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
10
990
The Straight Up "How To Draw Better" Workshop
denniskardys
235
140k
A designer walks into a library…
pauljervisheath
207
24k
RailsConf 2023
tenderlove
30
1.2k
The MySQL Ecosystem @ GitHub 2015
samlambert
251
13k
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
tammyeverts
53
2.9k
Bash Introduction
62gerente
613
210k
Rails Girls Zürich Keynote
gr2m
95
14k
Embracing the Ebb and Flow
colly
86
4.8k
Understanding Cognitive Biases in Performance Measurement
bluesmoon
29
1.8k
Transcript
MetahumanSDKを使ったAIアバターを作ったよ 武村達也 2025.2.15 Unreal Engine Meetup Hiroshima #1
自己紹介 武村達也 某ITコンサル会社勤務 非エンジニア (前職は某地方銀行30年) @tatsuya1970 ・文系ですが、 趣味でゲームや電子工作を作成 ・ハッカソンに約20回参加 入賞多数
・趣味は、リツイート
Unreal Engineを始めたきっかけ
国土交通省 PLATEAU(プラトー)
PLATEAUの広島市紙屋町近辺のデータを フォートナイトへ (島コード 8767-5832-9806) https://youtu.be/QUnpZmurgF0 当日は動画を流しました。 ※動画は右QRコード、 または下URLから
本題
作ったもの AIアバター 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/xlWKQUQ0rg8
経緯
昔、Unity + Live2Dで自分のアバター作成 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/6WbgKR_PspA
その作成方法を技術ブログ(Qiita)に公開したところ https://qiita.com/tatsuya1970/items/d2d3e460cf310957e2f0
お仕事が舞い込んできた(副業) オーダー:案件化前の技術検証 ・フォトリアルな受付AI ・リップシンク ・ウェブで動く
Live2D 商用利用はいろいろ大変らしいので却下
生成AI 「HeyGen」 API利用金額が高そうなので却下 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/yc_FrwIQiJY
Character Creator なぜかUnityにアップすると劣化したので却下
Blenderの何かのプラグイン 不気味の谷を越えられないので却下
AVATAR SDK これも不気味の谷を越えられないので却下
Unityのアセット「AVATAR MAKER」 これも不気味の谷を越えられないので却下
Unity + WebGL そもそもマイクに対応してないことが判明し 却下 ※当日参加者の方から指摘があり、 もしかしたら、対応するかも。
Unreal Engine + Metahuman + WebGL UE5では対応してない UE4にダウングレードするもスタック WebGL はあきらめる
Unreal Engine + Metahuman + Pixel Streaming
Omniverse Audio2Face (自分のPCのスペックではすぐフリーズ) UE5からPythonを実行 PythonでOpenAIのWhisperAPIを利用 プラグイン:Runtime Speech Recognizer いろいろ試行錯誤するも、うまくいかない
Google Speech Kit これでうまく行った!
ブループリント
できた!! https://youtu.be/xlWKQUQ0rg8
作成方法はこちら https://note.com/project_design/n/n184e226183c5
ありがとうございました