Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
MetahumanSDKを使ったAIアバターを作ったよ
Search
tatsuya1970
February 15, 2025
Technology
0
170
MetahumanSDKを使ったAIアバターを作ったよ
2025.2.15 Unreal Engine Meetup Hiroshima #1
https://ue-hiroshima.connpass.com/event/338042/
tatsuya1970
February 15, 2025
Tweet
Share
More Decks by tatsuya1970
See All by tatsuya1970
#普通の文系サラリーマンチャレンジ 自分でアプリ開発と電子工作を続けたら人生が変わった
tatsuya1970
0
1.2k
ChatGPTで2時間でUEアプリを作成できるかな?
tatsuya1970
0
73
PLATEAUについて
tatsuya1970
0
74
最近急速に発展している動画生成AIの概要とデモ
tatsuya1970
0
45
生成AIはじめの一歩
tatsuya1970
0
99
技術の民主化と経営システム
tatsuya1970
0
50
生成AIはじめの一歩
tatsuya1970
1
180
普通のサラリーマンでも ここまでできた XR 体験記
tatsuya1970
0
110
生成AIでできること(2024.9.9【HiBiS】最新Techセミナー「生成AIによるビジネス活用術」)
tatsuya1970
0
140
Other Decks in Technology
See All in Technology
プロポーザルのコツ ~ Kaigi on Rails 2025 初参加で3名の登壇を実現 ~
naro143
1
240
Digitization部 紹介資料
sansan33
PRO
1
5.5k
LLMアプリの地上戦開発計画と運用実践 / 2025.10.15 GPU UNITE 2025
smiyawaki0820
1
550
フレームワークを意識させないワークショップづくり
keigosuda
0
160
そのWAFのブロック、どう活かす? サービスを守るための実践的多層防御と思考法 / WAF blocks defense decision
kaminashi
0
200
incident_commander_demaecan__1_.pdf
demaecan
0
120
Wasmのエコシステムを使った ツール作成方法
askua
0
160
OCI Network Firewall 概要
oracle4engineer
PRO
2
7.9k
AWS Top Engineer、浮いてませんか? / As an AWS Top Engineer, Are You Out of Place?
yuj1osm
2
210
大規模サーバーレスAPIの堅牢性・信頼性設計 〜AWSのベストプラクティスから始まる現実的制約との向き合い方〜
maimyyym
9
4.6k
能登半島地震において デジタルができたこと・できなかったこと
ditccsugii
0
190
【Kaigi on Rails 事後勉強会LT】MeはどうしてGirlsに? 私とRubyを繋いだRail(s)
joyfrommasara
0
260
Featured
See All Featured
Done Done
chrislema
185
16k
Fireside Chat
paigeccino
40
3.7k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
12
1.2k
Docker and Python
trallard
46
3.6k
RailsConf 2023
tenderlove
30
1.2k
VelocityConf: Rendering Performance Case Studies
addyosmani
332
24k
Large-scale JavaScript Application Architecture
addyosmani
514
110k
Gamification - CAS2011
davidbonilla
81
5.5k
Java REST API Framework Comparison - PWX 2021
mraible
34
8.9k
Designing for Performance
lara
610
69k
Build The Right Thing And Hit Your Dates
maggiecrowley
37
2.9k
For a Future-Friendly Web
brad_frost
180
9.9k
Transcript
MetahumanSDKを使ったAIアバターを作ったよ 武村達也 2025.2.15 Unreal Engine Meetup Hiroshima #1
自己紹介 武村達也 某ITコンサル会社勤務 非エンジニア (前職は某地方銀行30年) @tatsuya1970 ・文系ですが、 趣味でゲームや電子工作を作成 ・ハッカソンに約20回参加 入賞多数
・趣味は、リツイート
Unreal Engineを始めたきっかけ
国土交通省 PLATEAU(プラトー)
PLATEAUの広島市紙屋町近辺のデータを フォートナイトへ (島コード 8767-5832-9806) https://youtu.be/QUnpZmurgF0 当日は動画を流しました。 ※動画は右QRコード、 または下URLから
本題
作ったもの AIアバター 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/xlWKQUQ0rg8
経緯
昔、Unity + Live2Dで自分のアバター作成 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/6WbgKR_PspA
その作成方法を技術ブログ(Qiita)に公開したところ https://qiita.com/tatsuya1970/items/d2d3e460cf310957e2f0
お仕事が舞い込んできた(副業) オーダー:案件化前の技術検証 ・フォトリアルな受付AI ・リップシンク ・ウェブで動く
Live2D 商用利用はいろいろ大変らしいので却下
生成AI 「HeyGen」 API利用金額が高そうなので却下 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/yc_FrwIQiJY
Character Creator なぜかUnityにアップすると劣化したので却下
Blenderの何かのプラグイン 不気味の谷を越えられないので却下
AVATAR SDK これも不気味の谷を越えられないので却下
Unityのアセット「AVATAR MAKER」 これも不気味の谷を越えられないので却下
Unity + WebGL そもそもマイクに対応してないことが判明し 却下 ※当日参加者の方から指摘があり、 もしかしたら、対応するかも。
Unreal Engine + Metahuman + WebGL UE5では対応してない UE4にダウングレードするもスタック WebGL はあきらめる
Unreal Engine + Metahuman + Pixel Streaming
Omniverse Audio2Face (自分のPCのスペックではすぐフリーズ) UE5からPythonを実行 PythonでOpenAIのWhisperAPIを利用 プラグイン:Runtime Speech Recognizer いろいろ試行錯誤するも、うまくいかない
Google Speech Kit これでうまく行った!
ブループリント
できた!! https://youtu.be/xlWKQUQ0rg8
作成方法はこちら https://note.com/project_design/n/n184e226183c5
ありがとうございました