ウェートトランスファー:動いて初めてわかること

アバターが持つウェートを衣装へ移す作業は、アイテムによっては手作業でもかなり煩雑です。

最寄り頂点法、最寄り表面補間、ヴォクセルを使った熱拡散。主要な3Dアプリにもあるこれらの方法が、完全自動化にどこまで耐えられるのか。私は実際の衣装で比較してみることにしました。

用意したのは、Tシャツ、襟、二重ポケットを重ねた多層構造のトップスと、左右の裾の隙間がわずか2ミリのワイドパンツ。難しい条件をまとめた検証モデルです。

Aポーズの多層衣装とワイドパンツ
Aポーズの多層衣装とワイドパンツ — 図版: Enzoviz — metaverse-wearables-3

比較の出発点となる、Aポーズのモデルです。

最寄り表面補間 — Nearest Face Interpolation

計算がシンプルで直感的で、体に沿う衣装や多層メッシュには扱いやすい方法でした。一方、くぼんだ部分では転写先を誤りやすく、違うボーンへ結び付いた頂点が、アニメーション中に引き延ばされてしまいます。

最寄り表面補間で両脚の裾がくっついた結果
最寄り表面補間で両脚の裾がくっついた結果 — 図版: Enzoviz — metaverse-wearables-3

左右の裾がくっつき、動くと破綻が目立ちます。

ヴォクセル熱拡散 — Voxel Heat Diffusion

衣装をヴォクセル化し、熱伝導のようにウェートを広げる方法です。隣接していない部分へ直接移さないため、手足と胴体の取り違えを減らせるのではないかと期待しました。

実際には関節間のウェート移行が滑らかになったものの、その範囲の制御が難しく、ボディの既存ウェートを引き継ぐ力は弱く感じました。両脚の隙間も課題として残りました。

アバターと衣装の両方をこれからリギングする場面には向いていても、リギング済みのボディから衣装へ転写する今回の用途には、実用的とは感じられませんでした。

熱拡散でパンツの形が崩れた結果
熱拡散でパンツの形が崩れた結果 — 図版: Enzoviz — metaverse-wearables-3

洋服のパンツが、まるで袴のような形に。

Corrective Smooth Bakerを後処理に使う

最寄り表面補間の後にCorrective Smoothで過剰な変形を見つけ、グループウェートで不適切な割り当てを直しました。くっつきは和らぎましたが、副作用として、重なった生地同士のウェートの一貫性が崩れました。

Corrective Smooth後の多層衣装の変形
Corrective Smooth後の多層衣装の変形 — 図版: Enzoviz — metaverse-wearables-3

自分の方法を探す

近傍過変形の修正 — Adjacent Over-deformed Refinement

過剰に変形する部分を再帰的に検出し、連続する近傍メッシュのウェートで置き換える処理を試しました。これで、両脚がくっつく問題は解消できました。

ところが、連続性を優先すると別の問題が出ます。女性キャラクターの胸が、両脚のように分離すべき部位として扱われ、かえって一貫性を失いました。ポケットなど、表面に付いた部品が服から飛び出すこともありました。

ダブルブレストのウェートと重なりの問題
ダブルブレストのウェートと重なりの問題 — 図版: Enzoviz — metaverse-wearables-3

ダブルブレストの重なりにも、不自然なずれが生まれました。

双方向セグメント投影 — Bi-directional Segment Projection

最終的に、この方法では裾が非常に近くてもくっつかず、ウェートを転写できました。関節まわりの柔らかさもより忠実で、実行時間を短く保ちながら、付属パーツとの連続性も維持できました。

双方向セグメント投影で両脚を分離できた結果
双方向セグメント投影で両脚を分離できた結果 — 図版: Enzoviz — metaverse-wearables-3

ここまでをつなぐことで、CADの衣装をメタバース用アセットへ変換する自動パイプラインが形になりました。当時の記事では、1アイテムあたり70時間強に相当する手作業を省く取り組みとして紹介しました。形、素材、動きまでを通して扱えることが、この三部作の到達点です。

Mixamoの動きを適用した衣装のアニメーション
Mixamoの動きを適用した衣装のアニメーション — 図版: Enzoviz — metaverse-wearables-3

Mixamoのモーションを適用した例です。

UGC向けに変換したDMKTZの衣装
UGC向けに変換したDMKTZの衣装 — 図版: Enzoviz — metaverse-wearables-3

DMKTZのデザインを、UGCとして使える衣装へ。

デジタルファッションの続きは、DMKTZ公式Instagramでも。

DMKTZ公式Instagram

ピース。