Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
MetahumanSDKを使ったAIアバターを作ったよ
Search
tatsuya1970
February 15, 2025
Technology
0
110
MetahumanSDKを使ったAIアバターを作ったよ
2025.2.15 Unreal Engine Meetup Hiroshima #1
https://ue-hiroshima.connpass.com/event/338042/
tatsuya1970
February 15, 2025
Tweet
Share
More Decks by tatsuya1970
See All by tatsuya1970
技術の民主化と経営システム
tatsuya1970
0
14
生成AIはじめの一歩
tatsuya1970
1
86
普通のサラリーマンでも ここまでできた XR 体験記
tatsuya1970
0
75
生成AIでできること(2024.9.9【HiBiS】最新Techセミナー「生成AIによるビジネス活用術」)
tatsuya1970
0
78
PLATEAUと私
tatsuya1970
0
100
普通のサラリーマンが社外でアウトプットを続けていたら、いつの間にかコミュニティマネージャーとして転職した話
tatsuya1970
0
100
AI Texture Generator
tatsuya1970
0
140
生成AIでできること(2024.2.22生成系人工知能(AI)に関する講演会)
tatsuya1970
0
120
生成AIでできること
tatsuya1970
1
220
Other Decks in Technology
See All in Technology
あれは良かった、あれは苦労したB2B2C型SaaSの新規開発におけるCloud Spanner
hirohito1108
2
870
Autonomous Database Serverless 技術詳細 / adb-s_technical_detail_jp
oracle4engineer
PRO
17
45k
PHPカンファレンス名古屋-テックリードの経験から学んだ設計の教訓
hayatokudou
2
530
Share my, our lessons from the road to re:Invent
naospon
0
130
ExaDB-XSで利用されているExadata Exascaleについて
oracle4engineer
PRO
3
150
AIエージェント元年
shukob
0
140
RemoveだらけのPHPUnit 12に備えよう
cocoeyes02
0
120
株式会社EventHub・エンジニア採用資料
eventhub
0
4.3k
白金鉱業Meetup Vol.17_あるデータサイエンティストのデータマネジメントとの向き合い方
brainpadpr
7
990
一度 Expo の採用を断念したけど、 再度 Expo の導入を検討している話
ichiki1023
1
250
ホワイトボードチャレンジ 説明&実行資料
ichimichi
0
140
役員・マネージャー・著者・エンジニアそれぞれの立場から見たAWS認定資格
nrinetcom
PRO
0
1.5k
Featured
See All Featured
Java REST API Framework Comparison - PWX 2021
mraible
29
8.4k
We Have a Design System, Now What?
morganepeng
51
7.4k
jQuery: Nuts, Bolts and Bling
dougneiner
63
7.7k
Designing on Purpose - Digital PM Summit 2013
jponch
117
7.1k
Bootstrapping a Software Product
garrettdimon
PRO
306
110k
The Straight Up "How To Draw Better" Workshop
denniskardys
232
140k
Writing Fast Ruby
sferik
628
61k
Speed Design
sergeychernyshev
27
800
実際に使うSQLの書き方 徹底解説 / pgcon21j-tutorial
soudai
175
52k
Build your cross-platform service in a week with App Engine
jlugia
229
18k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.3k
How to train your dragon (web standard)
notwaldorf
91
5.9k
Transcript
MetahumanSDKを使ったAIアバターを作ったよ 武村達也 2025.2.15 Unreal Engine Meetup Hiroshima #1
自己紹介 武村達也 某ITコンサル会社勤務 非エンジニア (前職は某地方銀行30年) @tatsuya1970 ・文系ですが、 趣味でゲームや電子工作を作成 ・ハッカソンに約20回参加 入賞多数
・趣味は、リツイート
Unreal Engineを始めたきっかけ
国土交通省 PLATEAU(プラトー)
PLATEAUの広島市紙屋町近辺のデータを フォートナイトへ (島コード 8767-5832-9806) https://youtu.be/QUnpZmurgF0 当日は動画を流しました。 ※動画は右QRコード、 または下URLから
本題
作ったもの AIアバター 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/xlWKQUQ0rg8
経緯
昔、Unity + Live2Dで自分のアバター作成 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/6WbgKR_PspA
その作成方法を技術ブログ(Qiita)に公開したところ https://qiita.com/tatsuya1970/items/d2d3e460cf310957e2f0
お仕事が舞い込んできた(副業) オーダー:案件化前の技術検証 ・フォトリアルな受付AI ・リップシンク ・ウェブで動く
Live2D 商用利用はいろいろ大変らしいので却下
生成AI 「HeyGen」 API利用金額が高そうなので却下 当日は動画を流しました。 ※動画は右QRコード、 または下URLから https://youtu.be/yc_FrwIQiJY
Character Creator なぜかUnityにアップすると劣化したので却下
Blenderの何かのプラグイン 不気味の谷を越えられないので却下
AVATAR SDK これも不気味の谷を越えられないので却下
Unityのアセット「AVATAR MAKER」 これも不気味の谷を越えられないので却下
Unity + WebGL そもそもマイクに対応してないことが判明し 却下 ※当日参加者の方から指摘があり、 もしかしたら、対応するかも。
Unreal Engine + Metahuman + WebGL UE5では対応してない UE4にダウングレードするもスタック WebGL はあきらめる
Unreal Engine + Metahuman + Pixel Streaming
Omniverse Audio2Face (自分のPCのスペックではすぐフリーズ) UE5からPythonを実行 PythonでOpenAIのWhisperAPIを利用 プラグイン:Runtime Speech Recognizer いろいろ試行錯誤するも、うまくいかない
Google Speech Kit これでうまく行った!
ブループリント
できた!! https://youtu.be/xlWKQUQ0rg8
作成方法はこちら https://note.com/project_design/n/n184e226183c5
ありがとうございました