clusterでLOD対応したときの話 / cluster LOD

by Cluster, Inc.

Slide 1

Slide 1 text

clusterでLOD対応したときの話クラスター株式会社 xyx

Slide 2

Slide 2 text

Slide 3

Slide 3 text

今日する話

Slide 4

Slide 4 text

cluster 大加速祭2021 Keynote https://youtu.be/wRErhyoT70c?t=1261

Slide 5

Slide 5 text

モデルの自動変換 & LODでモバイル環境でもVRM50体表示できるようになった開発したVRM miniﬁerの(めっちゃ)技術的な話をします glTF-2.0 spec を手元にご用意ください LOD全体の裏話は↓で見れます Cluster Tech Talk https://youtu.be/WyC76fzzzCA?t=7629

Slide 6

Slide 6 text

10分で理解するVRM miniﬁer

Slide 7

Slide 7 text

Slide 8

Slide 8 text

Slide 9

Slide 9 text

Cluster, Inc. All Rights Reserved. VRM miniﬁer 出力仕様 ● bone: VRM必須ボーンのみ ● mesh: Δ~2K, ~2K頂点 skinned mesh ひとつ ● material: unlit (opaque or alphacut), ~256px ひとつ実装 ● go ● qmuntal/gltf + 数千行の独自コード設計思想 ● 出力VRMの使用メモリの上限保証 ● 小ささの限界追求: プロダクト設計のベースラインとして機能させる ○ 非表示やプレースホルダのぎりぎり手前

Slide 10

Slide 10 text

Slide 11

Slide 11 text

Cluster, Inc. All Rights Reserved. マテリアル変換 Standard/MToon/Unlit → Unlitに ● base textureとemissive textureの統合 ● transparent → alpha cut ● 透明部分のmesh消去 VRoid Studioの服は透明テクスチャ多用してるので簡略化前に削らないと見えないメッシュに貴重なポリゴンが吸われてしまう

Slide 12

Slide 12 text

Cluster, Inc. All Rights Reserved. メッシュ変換 I ひとつの空間に正規化してから統合 skinningはjoint nodeとinverse bind matrixが大事 ● node(skinとskeleton)のtransformは不要 glTF仕様では珍しく(?)skinは解釈が難しい書き方になってる https://github.com/KhronosGroup/glTF-Tutorials/blob/master/gltfTutori al/gltfTutorial_020_Skins.md 大変そうにしてる人たち https://github.com/KhronosGroup/glTF-Tutorials/issues/17 https://github.com/KhronosGroup/glTF/issues/1270 https://github.com/KhronosGroup/glTF/pull/1195

Slide 13

Slide 13 text

Cluster, Inc. All Rights Reserved. メッシュ変換 II メッシュ簡略化: ↓の論文を実装するだけ高速化にコツがいる ● 部分的にpriorityが更新されるpriority queue ファンシーな簡略化アルゴリズムより、実データ・要望に合わせたコスト関数の設計が肝 Surface Simpliﬁcation Using Quadric Error Metrics (1997) doi.org/10.1145/258734.258849 https://www.cs.cmu.edu/~./garland/Papers/quadrics.pdf

Slide 14

Slide 14 text

Cluster, Inc. All Rights Reserved. 学び実データで地道に改善していくのが大事存在する仕様はすべて使われる例 skin meshのbone hierarchyのネスト構造・スケーリング ● アバター改変勢のデータ構造の特徴 opaqueの場合alphaは無視しなければならない(MUST) ● 透明なテクスチャをopaqueで使ってる人がいる UVのrepeat mode textureが存在しない(ﬂat colorな)mesh などなど…