Slide 1

Slide 1 text

メタバース研究所のマネジメントプレイヤーが 爆速で業務効率化している件 ❏ 講演者について ❏ メタバースR&Dにおける生成AIと最新事例 ❏ “尊い”業務外活動 ❏ 社会との界面をリサーチする ❏ クリエイターは時間を作り出してなんぼ ❏ 「すごいことを楽しそうに」「発信して」 「社会に問う」 ❏ 研究開発でのChatGPT活用 ■ インターンへの実装方針指示 →ChatGPTによる改善 ❏ まとめ ChatGPT選手権!エンジニアリングに 組み込んでみましたLT大会 2023年4月4日 LT⑤12:45~12:55 Generated by Akihiko Shirai しらいはかせ/白井暁彦 @o_ob REALITY株式会社 GREE VR Studio Laboratory, Director デジタルハリウッド大学 大学院 客員教授

Slide 2

Slide 2 text

白井暁彦: VRエンタテインメントシステムの研究者 書籍「白井博士の未来のゲームデザイン~エンタテイメントシステムの科学~」(2013)より ▶ 2018年6月より現職 GREE VR Studio Lab, Director

Slide 3

Slide 3 text

REALITY/GREE VR Studio Lab: メタバースの未来開発 UXDevティザーシリーズは 各国語版を http://vr.gree.net/lab/uxdev に て公開しています 学術面も論文賞授賞、CEDEC、 SIGGRAPH ASIA採択など豊作 技術紹介はこちら YouTube: https://j.mp/VRSYT

Slide 4

Slide 4 text

[AI Fusion]アバターカラオケを実現する技術 ● MIDIからの自動生成+人間の生き生きとしたモーションの融合

Slide 5

Slide 5 text

[最新作]Metaverse Mode Maker 生成AIxメタバース:VR,WordToTextile,MotionUGC,AITuber… 来週フランスで 発表します!

Slide 6

Slide 6 text

“尊い” 業務外活動 “尊い” 業務外活動 Generated by Akihiko Shirai

Slide 7

Slide 7 text

「AIとコラボして神絵師になる  論文から読み解くStable Diffusion」 Kindle版 https://ivtv.page.link/ak 印刷版 https://ivtv.page.link/ap 著者:白井暁彦 2022/10/28発売開始 (StableDiffusion公開から2ヵ月!) ※業務外!副業申請済。

Slide 8

Slide 8 text

GREE技術書典部 社内部活動で技術同人誌を 執筆・頒布する活動ではじまる 新刊 「グリー技術書典部誌 2022 年秋号」 オンライン版もあります 技術書典13にて GREE TECH CONF 2022にて グリー技術書典部誌 各1,000円

Slide 9

Slide 9 text

グリー技術書典部・過去のラインナップ 過去の白井の執筆(基本的に業務外!) ● VTuberライブエンタメ技術に求められる研究開発 ● Virtual Cast と Hapbeat を使った国際双方向アバター触覚ライブの開発 ● Mozilla Hubs を用いたオンラインイベント WebVR 化テクニック https://techbookfest.org/organization/276320001 StableDiffusionの公開(8/26) ↓ 技術書典13(9/25)に向けて、 1か月で「グリー技術書典部誌 2022 年秋号」に寄稿(50p) ↓ 翌日に編集者から商業書籍化の オファーを頂く ↓(100ページ近く加筆…) 10/28に発売開始!

Slide 10

Slide 10 text

[2022/12/2] https://gs.dhw.ac.jp/news/2022-12-02/ ※今期からデジハリ大学院で クリエイティブAIラボを主宰します

Slide 11

Slide 11 text

We're hiring! Research Intern also welcome! Twitter @VRStudioLab All we have own avatars We can be whoever we want!

Slide 12

Slide 12 text

[REALITY] かわいいケモミミCEOがいる たのしいしょくばです ※もちろんこれも “業務”ではないはず…

Slide 13

Slide 13 text

社会との界面を リサーチする インターフェイス 技術だけでは解決しないので

Slide 14

Slide 14 text

毎日ブログ書いています![メタバース開拓日誌] 人気のあった記事からわかる社会の注目度… ● カッとなってGPT-4で確定申告をスマートにした ● OpenAI公式文書に基づきGPT4に 「倫理的脱獄」を誑かす(たぶらかす) ● 海外出張を楽にする ● LangChainもくもく会・デプロイ先まとめ ● スライドを秒で作るSlidesGPT ● [本日初公開]インターンの書いたコードレビューと指導を同時に達成する (組織の意向とは関係なく)オー プンな技術発信です

Slide 15

Slide 15 text

「すごいことを楽しそうに」「発信して」「社会に問う」 REALITYのnote ラボのマガジンより https://note.com/reality_eng/m/m394ac85738b5 楽しそうに見えるかもしれないけど、実は高度で長期で正解がないR&Dの世界…

Slide 16

Slide 16 text

クリエイターは 時間を作り出してなんぼ (自戒を込めて) そして、どんなにAIがすごくなっても クリエイターは 時間を作り出してなんぼ Generated by Akihiko Shirai

Slide 17

Slide 17 text

生成AIがどんなに便利に なっても忙しければ無意味 (心を亡くすと書いてイソガシイ) 生成AIがどんなに便利に なっても忙しければ無意味 Generated by Akihiko Shirai

Slide 18

Slide 18 text

[本務(の一部)] https://vr.gree.net/lab/internship/

Slide 19

Slide 19 text

[業務]インターンの書いたコードレビューの難しさ ・インターンのスキルは多種多様 ・リモートオフィス ・デイリースクラム ・週に3日程度のワーク ・8時間以内にレポート含めて終わる ・難しすぎるストレッチは事故に… ・時々すごいものが生まれる ・研究と開発でやることが違う ・開発と教育指導を同時に達成する 無限に時間が
 かかります…!
 Generated by Akihiko Shirai

Slide 20

Slide 20 text

エンジニアリングタスクの実装方針指示 →ChatGPTによる改善 [よくある失敗コース] 1. 実現したい機能の設計 2. UI/UX等のスケッチ、アルゴリズムの準備 3. 事前調査(環境や作業時間の想定) 4. 数多ある実装方法(検索して悩む) (インターンが勝手に判断している!!) 5. 迷宮入りする……永遠に終わらない! ↓ChatGPTによる[事前調査と照会]に変更↓ 1. 実現したい機能の設計 2. UI/UX等のスケッチ、アルゴリズムの準備 3. 事前調査(環境や作業時間の想定) 4. GPTさんに問うた結果を共有してもらう 5. 判断は大人が責任をとる 6. うまくいかなかったケースも共有 ChatGPTによる 実装方針の事前調査

Slide 21

Slide 21 text

うまくいった例: “問い”と”その出力結果”を共有してから開始 [Slackで共有するだけ!] ・質問プロンプト ・得られた回答プロンプト ・具体的なコード  ↓ この実装方針でいいかどうか? (大人の判断) ・判断理由をきちんと伝える

Slide 22

Slide 22 text

[うまくいかない例] ↓ ロジック以前に そもそもUnity公式に永 遠に解決されないバグが 存在している。 (忘れてた…ゴメン) ↓ その後 人間の知力で解決 ↓ このChatGPTとのやり とりをSlackや、 Issue上でレポートさせ ておく。 ↓ Slack検索するとヒット しやすくなり今後の知見 として役に立つ! もし [Slackで共有しないと…] ・ちょっと調べて諦める ・不正解や妄想コードに振り回 される ・コピペコードで思考ゼロ …copilotを使うときも同じ…

Slide 23

Slide 23 text

[成果例]140秒でわかるメタバース開発TIPS bit.ly/140meta ▶学生とAITuberだけで制作したメタバース学習番組

Slide 24

Slide 24 text

2023/4/10~20 インターン中心で3回開催予定 https://connpass.com/event/279669/ もちろん生成AIですごいものを作りたい学生さん めちゃ歓迎です!!!

Slide 25

Slide 25 text

https://corp.gree.net/jp/ja/metaverse-recruit/ グリーグループ&REALITY株式会社を よろしくお願いいたします!