メインコンテンツへスキップ
見出し画像

自宅で!DAW × SYNCROOM × NDIで行う!②配信設定 ヘッドマウントディスプレイ(HMD)でのダンス、演劇パフォーマンス!

    HMDで
    ・会話のタイミングがシビアな演劇などの会話
    ・BGMに合わせたダンス

    などYamaha Syncroomを使用すると
    レイテンシー(遅延)の少ない通信にて、
    円滑な会話や音にタイミングをより合わせた
    パフォーマンスを行いやすくなります。


    ただVRChatやクラスター上の
    アクターさんやダンサーさんは通常
    Quest2などのヘッドマウントディスプレイ(HMD)を
    装着しされているとは思いますが、
    直接DAWやSYNCROOMに接続できません。

    ここではOBSとNDIとNDI Webcamを使用して
    ヘッドマウントディスプレイ(HMD)のマイクとヘッドホンを
    DAW(作曲ソフト)やSYNCROOMに接続する方法
    を記載いたします。


    これにより、
    ・HMDでSYNROOMセッションが行える
     (本来のASIO接続より遅延はあり)

    ・ヘッドマウントディスプレイ(HMD)のマイクで
     カラオケ音源に合わせて流す事が可能になります。


    ※ASIO対応のオーディオインターフェースは必要です。
     ASIO4allなどの仮想オーディオインターフェースも
     疑似的に使用できますが、安定性の低下やレイテンシーが増大します。


    本記事は「自宅で!DAW × SYNCROOM × NDIで行う!
     オンラインライブ&セッション配信設定!」の拡張設定の記事です。
    詳しくは下記URLを参照ください。


    マイク ルーティング イメージ図

    画像

    HMDへの出力ルーティング イメージ図

    画像

    必要なもの
    ・HMD(Quest2など)
    ・OBS
    ・DAW
    ・オーディオインターフェース
    ・DistroAV
    ・NDI Runtime
    ・NDI Tools
    ・NDI Webcam


    ①HMD(ヘッドマウントディスプレイ)の
     出力入力の確認

    HMDの種類やPCとの接続方法や
    環境によって変化しますが

    Oculus Virtual Audio Device
    Stream Streaming Microphone
    Virtual Audio Drive

    などHMD(ヘッドマンウントディスプレイ)の入力元を確認します。

    画像

    ②OBSの音声入力で
     HMDの音声のソースを作成

    画像
    PBSのソースから「+」を押して
    音声入力キャプチャを選択
    画像
    名前をHMDなどに変更
    画像
    HMD\のデバイスを選択
    HMDの接続方法により入力元は変わります。
    画像
    合っていれば音声ミキサーのサウンドバーが反応します。
    画像
    三点マークから「オーディオの詳細プロパティ」を開く
    画像
    「モノラル」にチェックを入れる
    「トラック1-6」のチェックを外す

    ③OBSからNDIでDAWに音声送信

     NDI Tools、DistroAV、NDI Runtimeのインストールが必要です。
     ※前記事「自宅で!DAW × SYNCROOM × NDIで行う!
      オンラインライブ&セッション配信設定!」
    の参照をお願いします。

    画像
    マイクの入力ソース(ここではMMD)を右クリックし
    「フィルタ」を選択
    画像
    フィルタを「+」から
    「Dedicated NDI output (Audio Only)」を選択
    画像
    フィルタ名を入力
    ※ここでは仮に「HMD to DAW」
    画像
    NDI nameも同様に変更

    ④DAW内でNDIを受信

     DAW内の設定は前記事
     「自宅で!DAW × SYNCROOM × NDIで行う!
     オンラインライブ&セッション配信設定!」
    の参照をお願いします。

    画像
    Micのトラックのインサートに
    「NDI Input」を挿入
    画像
    NDI Source をHMD to DAW
    ※OBSを再起動するまでは「Dedicated NDI® Output」が表示されます。

    Channelは「Stereo,1-2」を選択
    Audio Levelは 「0dB」を選択

    ⑤SYNCROOMとDAWを連携を行う

    画像
    Cubase ミキサーコンソールでの設定例

    詳しくはYamaha公式URL内 8-1から8-3-4の
    「VST連携機能の使用方法」をご参照ください。
    https://syncroom.yamaha.com/v2/play/manual/index_pc.html#sec08

    他 Ableton、StudioOne、Calkwaok Sonarでも
    自環境ですと動作確認しています。
    前記事 Fの「syncroom_vst_bridge_sub_multioutのDAW別設定」を
    ご参照ください。


    ※SYNCROOMの安定稼働には
     ASIO対応のオーディオインターフェースが必要です。
     
     ASIO4allなどの仮想オーディオインターフェースも
     疑似的に使用できますが、安定性の低下とレイテンシーが増大します。


    ⑥カラオケ音源と合わさった音を
     NDIで出力する

    画像
    カラオケ音源とマイクがMixされた後のトラックの
    インサートにNDI Outputを挿入
    (例としてここでは前記事OBS OUTのトラック)



    ⑦NDI WebCamを経由させる

     A. 「NDI TOOLS」のNDI Lancherから 「Webcam」を起動します。

    画像
    WebCamを起動


    B. 4つまで選択可能ですが、
     ここではVideo1の歯車マークより
     DAWで設定したNDI出力名を選択します。
     ※「DAW OUT」など

    画像


    C. Audioの音量を+0dBに設定します。

    画像



    ⑧アプリのインプットにWebCamを指定する

     discordやVRChatのインプットをWebcamにすると
     DAWを通したマイクとカラオケ音源などが入力されます。
     (ここではWebcam1を指定)
     

    画像
    discordの場合

    Webcam機能はループバック機能として
    NDIプラグイン挿入が出来ない他のアプリでも
    さまざま利用できるシーンが多そうです。


    ⑨OBSでDAWの音をNDIで受け取る

    画像
    ソースから「+」でNDI Sourceを追加
    画像
    ソース名を入力
    (ここではDAW)
    画像
    DAW側のNDI Outputで設定した名前を選択

    ⑨OBSをモニターとして
     DAWの音声を聞く

    画像
    「DAW]のおーディオの詳細プロパティを選択
    画像
    「モニターと出力」を選択
    ※OBSから配信を行ない場合は「モニターのみ」でもOK

    OBSとNDIとWebcamがあれば
    CPU負荷はありつつもある程度汎用的に
    他にもループバック環境構築ができそうです。


    プロジェクトファイル

    全部の設定が難しいかもという方むけに
    ベースとなる各種DAWのプロジェクトファイルは
    Boothで販売もしております。
    ※本記事・前記事の基本設定は必要となります。 


     
     

    SUSABI

     
     
    VR上で企業案件、個人案件ともに様々なイベントの 製作進行/企画運営/当日ディレクション/配信/PA/マニュピレーター/Mix/MAなどを担当。 また様々なVRアーティストのスタッフとして ライブや運営をサポート。 個人では楽曲製作やMIX、ピアノ演奏も行っています。

    あなたへのおすすめ