最先端技術てんこ盛り！カムロ坂VirtualProductionの撮影現場技術【CADC2022】

VirtualProducitionとは最近日本でも流行りつつあるCGなどを使った最先端の撮影技術です。サイバーエージェントでは、VirtualProductionのために高精細大型LED、リアルタイム合成システム、トラッキングシステムなどを他所と比べてもいち早く導入し、カムロ坂スタジオにて開発・運用し、そして成長させ続けてきました。
最先端ゆえに常に前代未聞の挑戦だらけの中、一発勝負が多いライブを成功させ続けることはとても困難でした。
そのような厳しい条件の中、挑戦と安定を支えたオペレーションシステムと設備、またそれらを扱う取り組みをお届けします。

Transcript

1. ᭱ඛ➃ᢏ⾡࡚ࢇࡇ┒ࡾ㸟 ࣒࢝ࣟᆏVirtualProductionࡢ ᧜ᙳ⌧ሙᢏ⾡
2. ᾏᮌ ୍ె ᰴᘧ఍♫CyberAgent ᰴᘧ఍♫CyberHumanProductions VirtualStudioTeam StudioEngineer 2019᪂༞ධ♫ࠋ ୺࡟VirtualProductionࡸDigitalTwinLabelࡢ⌧ሙࢆぢࡘࡘ タഛ࡜஦ᴗ࡜㛤Ⓨࡢࢩࢼࢪ࣮ࢆ⏕ࡴࡇ࡜ࢆ ࣑ࢵࢩࣙࣥ࡟ࡋ࡚࠸ࡲࡍࠋ @kaikiofkaiki
3. ࣂ࣮ࢳࣕࣝᢏ⾡ࢆά⏝ࡋ࡚ ࣜ࢔ࣝࢱ࢖࣒࡛ᫎീࢆไసࡍࡿᡭἲ ࣓࢝ࣛࢺࣛࢵ࢟ࣥࢢ ⫼ᬒྜᡂ ఱࡶ࡞࠸✵㛫ࡢ⤮ࡀ... ࣜࢵࢳ࡞㒊ᒇࡢ୰࡟㸟 VirtualProduction࡜ࡣ
4. ᏶ᡂ⤮ࢆ᝿ീࡋ࡚సࡾࠊ ᧜ᙳ᫬࠿ࡽ᏶ᡂࡲ࡛᫬㛫ࡀ࠿࠿ࡿ ᬑ㏻ࡢไసࣇ࣮ࣟ ௻⏬ ⬮ᮏ ᐇ෗᧜ᙳ CGసᡂ ྜᡂ⣲ᮦ཰㘓 ࣞࣥࢲࣜࣥࢢ ᭱⤊ฟຊ ࢥ࣏ࣥࢪࢵࢺ ୖ ࠿ ࡽ ୗ ࡟ ไ స ࣇ ࣟ ؓ ࡀ ࡞ ࡀ ࢀ ࡚ ࠸ ࡃ
5. ⌧ሙ࡛࡯ࡰ᏶ᡂ⤮ࡲ࡛ぢࢀࡿ VirtualProductionࡢࣇ࣮ࣟ VirtualProduction ௻⏬ ⬮ᮏ ᭱⤊ฟຊ ఱᗘࡶᚤಟṇࢆ⧞ࡾ㏉ࡍ
6. CyberAgent࡛ࡢព⩏ ᗈ࿌ࢡ࢚ࣜ࢖ࢸ࢕ࣈࡢ㐍໬
7. CyberAgent࡛ࡢព⩏ ᗈ࿌ࢡ࢚ࣜ࢖ࢸ࢕ࣈࡢ㐍໬
8. ࣒࢝ࣟᆏࢫࢱࢪ࢜⤂௓
9. ࣂ࣮ࢳࣕࣝ᧜ᙳࢩࢫࢸ࣒
10. ฟ඾㸸https://https://www.cyberagent.co.jp/ 18pt
11. ࢩࢫࢸ࣒ᴫせ PTZ Camera stYpe Camera AJA KUMO እ㒊ᫎീPC TouchDesigner Reality RealityController 㓄ಙ StreamDeck iPhone ᫎീ CG/ྜᡂ ࣮࢜࣌ࣞࢩࣙࣥ FreeD stYpeHF ྜᡂᚋᫎീ ྜᡂ๓ᫎീ 㓄ಙ⏝ᫎീ ㈨ᩱᫎീ ࣓࢝ࣛᫎീ ࣓࢝ࣛᫎീ OSC
12. ࣮࢜࣌ࣞࢩࣙࣥ㢼ᬒ
13. ࣮࢜࣌ࣞࢩࣙࣥ㢼ᬒ ࣓࢝ࣛࢺࣛࢵ࢟ࣥࢢไᚚ UE4ไᚚ ྜᡂไᚚ ᫎീࢳ࢙ࢵࢡ ࢥ࣑ࣗࢽࢣ࣮ࢩࣙ ࣥ 㡢ኌไᚚ
14. ⌧ሙ࣮࢜࣌ࣞࢩࣙࣥࡢᨵၿ ⌧ሙࢆᏳᐃ/ᣑ኱ࡉࡏࡿྲྀࡾ⤌ࡳ
15. ⌧ሙ࡟సᴗࡀ㞟୰ࡋ࡚ࡋࡲ࠺ VP Engineer CGኚ࠼࡚ ḧࡋ࠸㸟 ࣜ࢔ࣝࢱ࢖࣒࡛⣲᪩࠸ᑐᛂࡀᅔ㞴࡟ ྜᡂ࡛ࡁ ࡿ㸽 Ⰽኚࡌࡷ࡞ ࠸㸽 ࣓࢝ࣛ ࢺࣛࢵ࢟ࣥࢢ ࡛ࡁ࡚ࡿ㸽
16. ไᚚศᩓࢩࢫࢸ࣒㸸RealityNode • ࣀ࣮ࢻ࣮࣋ࢫGUI࡛ࣜ࢔ࣝࢱ࢖࣒ไᚚྍ⬟ • ྠᮇࡋ࡚୪ิ᧯సྍ⬟ • ࣃ࣓࣮ࣛࢱㄪᩚ࡞࡝
17. ไᚚศᩓࢩࢫࢸ࣒㸸RealityAction • ࣎ࢱࣥᘧ࡛ࣜ࢔ࣝࢱ࢖࣒ไᚚྍ⬟ • ྠᮇࡋ࡚୪ิ᧯సྍ⬟ • ₇ฟⓎⅆ࡞࡝
18. ไᚚศᩓࢩࢫࢸ࣒㸸Reality VP Engineer VP Engineer VP Engineer ྜᡂ ࡋࡲࡍ㸟 㹁㹅ㄪᩚ ࡋࡲࡍ㸟 ࢝ࣛࢥࣞ ࡋࡲࡍ㸟
19. せᮃ 㞟⣙/ุ᩿ ᐇ⾜ ไᚚศᩓࢩࢫࢸ࣒ VP Engineer ⌧ሙ㈐௵⪅ VP Engineer VP Engineer
20. ไᚚ⡆␎໬㸸OSC Hub • ධຊࢆOSCࢆ㏻ࡋ࡚ࢯࣇࢺࡸࣁ࣮ࢻ࡬ • ௵ពࡢࣁ࣮ࢻ࢙࢘࢔࡛ไᚚྍ⬟࡬ • ୪ิไᚚྍ⬟ OSC Hub ධຊ ฟຊ
21. ไᚚ⡆␎໬㸸BG Key Wacher • ࣂࢵࢡࢢࣛ࢘ࣥࢻ࣮࢟ධຊ┘ど • Win32APIࢆ౑⏝ • C# Forms࢔ࣉ࡛ࣜసᡂ
22. ไᚚ⡆␎໬㸸OSC Hub
23. ไᚚ⡆␎໬㸸Hololensࡢ౛
24. せᮃ 㞟⣙/ุ᩿ ᐇ⾜ ไᚚศᩓࢩࢫࢸ࣒ VP Engineer ⌧ሙ㈐௵⪅ VP Engineer VP Engineer
25. LED STUDIO
27. CG㐃ື • nDisplay࡛⏬㠃ྠᮇ • RedSpy࡛CG࣓࢝ࣛ࡜ྠᮇ
28. ࣛ࢖ࢸ࢕ࣥࢢࡢ⡆᫆໬ ⌧ሙࢆᏳᐃ/ᣑ኱ࡉࡏࡿྲྀࡾ⤌ࡳ
30. CG࡟Ⰽࢆྜࢃࡏࡿࢩࢫࢸ࣒ • UE4࠿ࡽDMX↷᫂ࡢไᚚ • DMX Plugin Pixel Mapping
31. LED᪉ᘧ VS ࢡ࣐࣮ࣟ࢟᪉ᘧ ࢡ࣐࣮ࣟ࢟᪉ᘧ LED᪉ᘧ • ⣽࠿࠸㒊ศࡶᚓព • 3ḟඖⓗ࡞ືࡁ࡟ᙅ࠸ • ↷᫂ࡸⰍࡀ⮬⏤ • ≧ែᢕᥱࡀᐜ᫆ • ⣽࠿࠸㒊ศࢆ⾲⌧ࡋ࡟ࡃ࠸ • 3ḟඖⓗ࡞ືࡁ࡟ᙉ࠸ • ↷᫂ࡸⰍ࡟ไ㝈ࡀ࠶ࡿ • ≧ែᢕᥱࡀ㞴ࡋ࠸
32. LED᪉ᘧ VS ࢡ࣐࣮ࣟ࢟᪉ᘧ • ⣽࠿࠸㒊ศࡶᚓព ࢡ࣐࣮ࣟ࢟᪉ᘧ LED᪉ᘧ • 3ḟඖⓗ࡞ືࡁ࡟ᙅ࠸ • ↷᫂ࡸⰍࡀ⮬⏤ • ≧ែᢕᥱࡀᐜ᫆ • ⣽࠿࠸㒊ศࢆ⾲⌧ࡋ࡟ࡃ࠸ • 3ḟඖⓗ࡞ືࡁ࡟ᙉ࠸ • ↷᫂ࡸⰍ࡟ไ㝈ࡀ࠶ࡿ • ≧ែᢕᥱࡀ㞴ࡋ࠸
33. LED᪉ᘧ 㸤 ࢡ࣐࣮ࣟ࢟᪉ᘧ • ⣽࠿࠸㒊ศࡶᚓព ࢡ࣐࣮ࣟ࢟᪉ᘧ LED᪉ᘧ • ↷᫂ࡸⰍࡀ⮬⏤ • ≧ែᢕᥱࡀᐜ᫆ • 3ḟඖⓗ࡞ືࡁ࡟ᙉ࠸ • ↷᫂ࡸⰍ࡟ไ㝈ࡀ࠶ࡿ
34. ࣮ࣔ࢟ࣕࣉࢩࢫࢸ࣒
36. ࣎ࢹ࢕࣮ࣔࢩࣙࣥ • MVNࢆ฼⏝ • ཝࡋ࠸⎔ቃ࡛ࡶࡍࡄື࠸࡚ࡃࢀࡿ
37. ࣓࢝ࣛࢺࣛࢵ࢟ࣥࢢ • OptiTrackࢆ฼⏝ • UE4 VirtualCamera࡛࣮ࣜࣔࢺไᚚ
38. UE4 VirtualCamera • UE4ࡢᫎീࢆ࣮ࣜࣔࢺᶵჾ࡟ࢫࢺ࣮࣑ࣜࣥࢢ • ࣓࢝ࣛࡢタᐃࢆ࣮ࣜࣔࢺᶵჾኚ᭦ྍ⬟
39. MotionStreaming㸸MotionBuilder • UE5࡟ࢺࣛࢵ࢟ࣥࢢࢹ࣮ࢱࢆࢫࢺ࣮࣑ࣜࣥࢢ • ࣜ࢔ࣝࢱ࢖࣒⿵ṇ
40. MotionStreaming
41. CA BASE NEXT
42. CA BASE NEXT VRoid Unity UE4 Brender Reality MotionBuilder MVN VRM VRM fbx ࣮ࣔࢩࣙࣥ ࣮ࣔࢩࣙࣥ ྜᡂ
43. ࢭࣝࣝࢵࢡ࡞࢟ࣕࣛࢡࢱ࣮ࡣ 㥆ᰁࡲࡏࡿࡢࡀ኱ኚ • 135ĺ3%5 • ༳㇟ⓗ࡞ࣛ࢖ࢸ࢕ࣥࢢ࡛ㄪᩚ
44. ⾲᝟ไᚚ • iPhone࡛ไᚚ • ㄡ࡛ࡶ⡆༢࡟᧯సྍ⬟
45. ⾲᝟ไᚚ • ࣇ࢙࢖ࢩࣕࣝ࢟ࣕࣉࢳࣕ࡜ࡣ࣓ࣜࢹ࣓࠶ࡾ • ₇⪅㈇ᢸࡀ㧗࠸ • ⣽࠿࡞⾲⌧ࡀྍ⬟
46. ࡲ࡜ࡵ • ᐇ㐠⏝ࣀ࢘ࣁ࢘࡜㛤Ⓨ࡟ࡼࡿ㐍໬ • 㐠⏝⥆ࡅࡿࡈ࡜࡟࡝ࢇ࡝ࢇ㐍໬ࡋ࡚࠸ࡃ • ࣮࢜࣌ࣞࢩࣙࣥࡢศᩓ࡜⡆␎໬ • ࢖࣋ࣥࢺࡢᏳᐃ࡜ᣮᡓ࡟⧅ࡀࡿ • タഛ࡜ேࡀᥞࡗ࡚࠸ࡿࡇ࡜࡟ࡼࡿࢩࢼࢪ࣮ • ᙅⅬࢆ⿵࠸ྜ࠺≧ែࡢ☜❧ • ᵝࠎ࡞཰㘓ࣃࢱ࣮ࣥ࡟ᑐᛂ • ෆᐜ࡟ྜࢃࡏ࡚᭱㐺ᡭἲࢆ㑅ᢥ࡛ࡁࡿ