メインコンテンツへスキップ
見出し画像

VRChatアバターの同期を更に考える

    前置き

    この記事を書いてから2年近くが経ちました。Avatars3.0の根幹は大きく変わっておらず、今なお通用する内容です。
    一方で、この記事ではローカルプレイヤーとリモートプレイヤーが見ているアバターが常に同じ、という想定で書かれています。
    こんな事を言うということは…そうです、実はローカルプレイヤーとリモートプレイヤーで、見ているアバターが違う事があります。

    アバターが不一致になる時

    とはいえ、自分(ローカルプレイヤー)からは自分が見ているアバターと異なるアバターに見えているかどうか、直接は分かりません。ローカルプレイヤーとリモートプレイヤーで見ているアバターが違うのはどんな時でしょうか。先に見ていきましょう。

    フォールバック・インポスター

    まず上げられるのは、パフォーマンスランクのセーフティ等によってアバターフォールバックした時です。
    フォールバックは今着ているアバターが何かとは無関係に、指定したフォールバック対応アバター(指定していない場合は公式publicのアバターからランダム)に見える機能で、条件は厳しいながら自分でフォールバック対応アバターをアップロードしてそれを指定する事も可能です。
    自分でアップロード出来るという事は…上手くやれば、ある程度同期を一致させたフォールバック表示も可能です。

    なお、設定次第でフォールバックの代わりにインポスターが表示されていることがあり、この場合は完全にギミックが存在しないので、プレイヤーのTracking用IK情報のみが同期しているとみて良いでしょう。

    マルチプラットフォーム対応アバター

    画像
    PCとAndroidに対応している場合

    そしてもう一つがプラットフォーム(PC/Android/iOS)が異なる場合で、これはローカルプレイヤーのみならず、リモートプレイヤー同士でも各々のプラットフォーム環境のアバターが表示されています。
    どのプラットフォームにも極力同じにしたアバターをアップロードすることが推奨されていますが、Blueprint IDが同じであれば別個体のアバターであっても、別プラットフォームでアップロードすれば同じアバターとして認められます。Blueprint IDについては本筋と外れすぎるため割愛します。
    アバターのアップロード制限はモバイルプラットフォームの方が圧倒的に厳しいので、PCの方でリッチなアバターを上げておいて、Android/iOSの方は限界までそぎ落とした軽量アバター…実質別物のアバターをアップロードしている人が多いかと思います。ここで不一致が発生するわけですね。

    ローカルテスト・試着アバター

    少々特殊枠になりますが、アバターをテストビルドした場合、そのアバターはアップロードはされず、そのPC内に保存されます。そしてこのアバターに着替えると、他人からはアバターが変わっていないように見えています(アップロードされていないので、ダウンロードも出来ない)。
    発表されたばかりの Avatar MarketPlace でアバターを"試着"した場合も、この機構を転用しているようです。

    画像
    Build Type を Build & Test Your Avatar にするとテストビルドできる

    不一致なアバターで一致するもの、しないもの

    ここで、アバターが同期するものをおさらいしましょう。

    • VRCが定義済みのパラメーター

    • Expression Parameters

    • Tracking用IK情報 (主にHumanoidボーン用)

    • (プレイヤーの座標、アバタースケール)

    • (PhysboneコンポーネントのGrab/Pose中の座標)

    この中で、プレイヤーの座標、アバタースケール、VRChatが定義済みのパラメーター は共通仕様のため、アバターの見え方に依らず一致します。

    一方Tracking用IK情報それ自体は一致した情報が送られますが、再現するアバターのボーン構造側が異なる可能性があるため、完全な再現度が保証できません。
    特にTracking Controlの切り替えはアバターのPlayableLayers(特にBaseやAction)内で制御されるものなので、見えてるアバターによって制御が異なる可能性があります。

    Expression ParametersとPhysboneのGrab/Poseは同期の要ながら、一致させる条件が分かりづらく、特にModular Avatar等後付けギミックが増えた昨今では、ハマりポイントです。詳しく見ていきましょう。

    Expression Parameters

    Expression ParametersにSyncedチェックで追加したパラメーターは直接同期する、と前回の記事で述べました。
    パラメーターはリアルタイムに送受信を繰り返しているので、とにかくコンパクトであることが求められます。そこで、VRChatは同期するExpression Parameterを次の流れで実行します。

    画像
    Expression Parameters同期の流れ

    ローカルプレイヤーは送信タイミングが来たら、ローカルプレイヤーの元で同期パラメーターを一つのデータに纏め(シリアライズ)てから送信、
    リモートプレイヤーは受け取った同期データを、リモートプレイヤーが見ているアバターのExpression Parametersの並び順を元に、同期パラメーターとして復元(デシリアライズ)します。

    これが意味するところは、同期パラメーターを一致させるには、名前ではなくExpression ParametersのSyncedにしたパラメーターの並び順が重要、ということです。

    画像
    同期パラメーターがズレる例

    なお、ローカルテスト・試着アバターになっている間は、Expression Parametersの変化は送信されません。着替えたタイミングでパラメーターがリセットされたりもしないので、他人からは試着していることが一切分からないようになっています。気兼ねなく試着アバターのギミックをテストすることができるわけですね。

    PhysboneのGrab/Pose

    Physboneは自身の状態をパラメーターとしてアバターに渡す機能を持ちますが、その動作は基本的にはローカルです。
    しかし誰かがGrab/Poseした・どの位置にPoseしたかといった情報は同期が必要なため、例外的にPhysboneコンポーネント自身が直接同期を担っています。
    ところでPhysboneコンポーネントは一つのアバターに複数つけるものです。同じアバターであればどのPhysboneを掴んだかは自明ですね。では、別アバター同士ではどうでしょうか。
    VRChatではどのPhysboneが同じものであるかを特定するのに、Network IDというものをPhysboneにこっそり割り振って管理しています。Network IDは基本的にはHierarchyの上から順に割り振られていくので、Hierarchy上の全Physbone…少なくとも、見えているアバター同士で同じ数だけのPhysboneの並びが一致していれば、同期する、ということです。
    ちょうどいい実例があるので参考に紹介します。

    PhysBoneの同期ズレの例
    QuestだけPhysBoneオブジェクトの順番を逆にしています pic.twitter.com/r0g8jLw9c6

    — nekochanfood (@nekochanfood) January 7, 2023

    メニューバーの VRChat SDK > Utilities > Network ID Import and Export Utility から、VRChat公式のネットワークID割り当てツールが使えるので、手作業で割り振り直す事も出来ます。

    なお、ローカルテスト・試着アバターに関しては試していませんが、仕様を鑑みると、試着中には同期しないものと思います。

    別アバターに見えていても同期をいい感じにするには

    以上から、普段使っているプラットフォーム用のアバターを基準に、別アバターになって見えるアバターをいい感じに共通化すれば、同期ずれの心配が大きく減ります。不一致になりうる要素とその対策をまとめると、次のようになります。

    Humanoidボーンの体型(骨格)を極力近いものにする

    アバターの姿勢はアニメーションによるものの他、Tracking用IK情報からも再現されます。アバターの骨格体系が近ければ近いほど、その再現度は向上します。普段使いアバターと骨格体型の似たアバターをフォールバックアバターに指定すると良いでしょう。
    モバイル対応が手間だからといって、Android/iOSプラットフォームにだけマスコット系アバターを上げる、といった対処は避けましょう。それをするくらいなら対応せずにインポスター表示にした方がマシです。

    TrackingControl制御を一致させる

    具体的には、Base、Gesture、ActionのPlayableLayerはTracking Controlを操作している可能性が高いレイヤーです(場合によってはFXも)。ここの制御が不一致の場合、アバターのモーションやトラッキング状態が不一致になります。極力同じControllerを使い回しましょう。
    MAなどで後付けするポーズギミック系も、まったく同じように入れておくべきです。

    Expression ParametersのSyncパラメーターの並び順を揃える

    後述の後付けギミックもある場合、少なくともExpression ParametersのSyncパラメーターのbit数も一致するようにしておきましょう。同じExpression Parametersアセットファイルを使い回すのが最適解です。
    なんならフォールバックアバターとも同じにしておけば、いざフォールバックしてもフォールバックアバターと同期パラメーターが共通化できます。

    画像
    Expression Parametersアセット(例)

    Modular Avatar等の後付けギミックはHierarchyで同じ順で並べるようにしましょう。少なくともModular AvatarはHierarchyの上から順に処理されていくので、パラメーターの結合順もそれに従います。
    ハードリミットの都合でギミックを減らす場合は、両者に共通するものをHierarchyの上の方に固めて、片方にだけ存在するものを下の方に並べると良いでしょう。
    また、Modular Avatarにはこれを助けるコンポーネントが存在します。

    PhysboneコンポーネントのHierarchy上の並びを揃える

    これを達成しやすくするためには、Physboneが必ずしも揺らす対象ボーンに付けなくても良い仕様を利用して、アバター直下に空オブジェクトを作り、その中に1オブジェクト1PBとしてPhysboneコンポーネントを並べる作りにするのが手堅いでしょう。(ボーンへの指定はPhysboneのRoot Transformで行う)
    先述の後付けギミックと同じく、両者に共通するPBを上に固めて、片方にだけ存在するものを下に並べると良いです。

    画像
    Physboneコンポーネント整理の例

    なお、VRCQuestToolsには、並び順ではなく階層構造を見てNetwork IDを割り当て直す補助コンポーネントが存在します。

    あとがき

    アバターが違っている場合の同期処理ともなると、どうしても見えないものを手探りで調整するようなことになるので、理屈の理解と脳内イメージ構築が重要です。ややこしいですが、うっかり同期ズレで服が脱げて見える!といった事が起きないよう、気を付けていきましょう。


     
     
    Unityと和解したい… Unityと和解したくない?

    あなたへのおすすめ