メインコンテンツへスキップ
見出し画像

バス・バイク・車の走行動画を1台に統一できる?Pollo Recastで車・キャラ・背景を変更してみた【PR】

    こんにちは、安達です😊

    今回も、Pollo AIの「Recast」を使った検証をしていきます!

    前回は、乗り物の置き換えや、無人のキャデラックに4人のキャラクターを乗せる検証を行いました。

    ▼前回の記事はこちら

    第4回となる今回は、複数の動画から気に入った場面を集めて、乗り物とキャラクター、背景を揃えてみます。

    バス、バイパー、バイク。

    それぞれの良いところをつなぎ合わせた動画を、1台のコルベットが走る映像にできるのでしょうか?

    さらに、その走行映像を使って、ノクテルがバイクに乗る場面も作ってみました。

    うまくいったところも、修正が必要だったところも、実際の結果をご紹介します!🚗🏍️

    ※この記事は、Pollo AI様から検証用クレジットの提供を受けて制作したPR記事です。検証内容と感想は、実際の制作結果に基づいています。




    🎬 Pollo Recast 検証シリーズ|記事一覧

    第1回 🔻

    第2回 🔻

    第5回 🔻




    今回の検証|気に入った動きを活かして、見た目を揃えたい!

    今回使用するのは、Pollo AIの「Recast」

    元動画の動きやカメラワークを活用しながら、リファレンス画像をもとにキャラクターや乗り物、背景などを変更する機能です。

    🔗 Pollo Recast
    https://tinyurl.com/2j29et35

    今回は、元になる走行動画に加えて、車両・キャラクター・背景のリファレンス画像を用意し、日本語プロンプトで変更内容を指定しました。

    主に試したのは、次の3つです。

    • 複数の走行素材に登場する乗り物を、1台のコルベットに統一する

    • 運転するキャラクターと背景を変更する

    • 同じ走行素材を、ノクテルと専用バイクの映像に作り替える

    元になる動画は、バス、バイパー、バイクの映像から、気に入った場面をつなぎ合わせたものです。

    このカメラワークは使いたい。
    この走り方も残したい。

    そんな感じで選んだので、元動画の段階では乗り物が混ざっています😁


    検証①|バラバラの乗り物をコルベットに統一!

    まずは、動画に登場する乗り物を、オレンジ色のコルベットに変更してみます。

    運転するのは、THE HOLLOW PARADEのパンプキンです🎃

    画像
    画像

    車両の形やカラーリング、キャラクターの衣装を指定するため、リファレンス画像を用意しました。

    背景についても、使いたい場所の画像を添付しています。

    画像
    画像
    画像

    この素材を使って、元動画の走行演出を引き継ぎながら、車とキャラクター、背景を変更するように指示しました。

    結果は……

    コルベットの走行映像として、揃えることができました!🔥

    元は別々の乗り物だった場面も、同じ車が走る映像としてつなげられました。

    キャラクターの出番は多くありませんでしたが、パンプキンへの置き換えも確認できています。

    気に入った動きを集めてから、作品に合わせて見た目を揃える。

    こういう使い方ができるのは、動画を編集するうえで面白いですね。

    検証②|車内カットは衣装修正に成功。ただし景色は残った

    ただし、コルベットの映像では、1カ所だけ修正したい場面がありました。

    冒頭の車内カットです。

    ここで気になったのは、キャラクターだけでなく、車内から見える景色のつながりでした。

    用意した車内画像は、窓の外の景色や道路の見え方に違和感がありました。


    画像

    静止画の段階で気になる部分があっても、動画にすれば自然になるのでは?

    少し期待したのですが、今回はそうはいきませんでした。

    窓の外が動くことで、かえって違和感が目立ってしまったんですね。

    今回の結果を見る限り、こうした景色の不整合まで、自動的に整えてくれるとは限らないようです。

    そこで、この車内カットだけを切り出し、パンプキンのリファレンス画像を使って再度変更してみました。

    画像

    結果は……

    衣装の置き換えに成功しました!😊

    一方で、窓の外の景色は、希望したトンネル内には変わりませんでした。

    ただ、このカットを入れるのは、屋外からトンネルへ切り替わるところです。

    トンネルに入る直前の場面として使えば、編集上は問題ありません。

    今回は、キャラクターの修正ができたので、この映像を採用しました。

    すべてが指示どおりだったわけではありませんが、作品に使える形にはできました。

    検証③|今度はノクテルと専用バイクに変更!

    続いて、別の組み合わせも試してみます。

    今度の主役は、ノクテル。

    画像

    いつもの華やかな衣装から、レザージャケットに着替えてもらいました🏍️

    画像

    バイクも、ノクテルに合わせて用意しました。

    インディアン・スカウト・ボバーをイメージした、黒とワインレッドのカスタムバイクです。

    画像

    銀色の装飾や薔薇のモチーフも入れて、衣装と雰囲気を揃えています。

    今回は、コルベットの検証で使った走行動画から、パンプキンの顔アップが入る約3秒の車内カットだけを外し、ほぼ同じ動画を元動画として使用しました。

    そのうえで、登場する乗り物と人物を、ノクテルとこのバイクへ統一するように指定しています。

    前半の背景は、月夜の海岸道路。

    画像

    元動画には異なる背景が混ざっているので、それも添付した背景の世界観に揃えるように指示しています。

    こちらは、ノクテルと専用バイクの映像に変更できました!✨

    キャラクターと乗り物が変わると、同じ走行演出でも雰囲気が変わりますね。

    検証④|古城へ向かう場面で、余計なマントが!

    動画の後半では、キャラクターとバイクはそのままに、背景を変更します。

    今度は、古城へ続く長い石橋です。

    画像

    こちらも生成してみたのですが……

    ノクテルに、マントのようなものがついてしまいました😂

    今回の衣装は、体に沿ったレザージャケットとパンツです。

    マントを残さない指示も入れていたのですが、この生成では反映されませんでした。

    ただ、ほかの部分は問題ありません。

    そこで、変更するのは衣装に関する指示だけにしました。

    画像

    「マントをなくす」という指定に加えて、

    • ジャケットは腰丈で、体に沿う形

    • 背中の薔薇の刺繍は、ジャケットの表面に固定されている

    • 後方になびくのは長い銀髪

    • 余計な布があった場所は、自然な背景として描写する

    というように、残したいもの、消したいもの、なびいてよいものを分けて伝えました。

    プロンプトは、引き続き日本語です。

    結果は……

    今度は大丈夫でした!😆

    余計なマントがなくなり、狙っていたライディング衣装になりました。

    今回は、衣装に関する説明を具体的にしたところ、修正できたという結果です。

    日本語だから失敗したのかどうかは、この検証だけではわかりません。

    ただ、同じ日本語でも、伝え方を変えて改善できた点は収穫でした。


    コストは高い。そのぶん、素材はしっかり用意したい

    画像

    今回の検証で、改めて感じたことがあります。

    Recastは面白い機能ですが、気軽に何度も試すには、コストが気になります。

    たとえば、車内の修正では、使いたい部分は約3秒でした。

    今回は、その後ろに黒い画面を2秒足して、5秒の動画として処理しています。

    そのときの消費は、40%割引が適用されて51クレジットでした。

    ※今回の生成時に表示された消費量です。条件によって変わります。

    検証用のクレジットをいただいていなかったら、この車内の顔アップは、私ならカットしていたと思います🤣

    だからこそ、生成前の準備は大切です。

    車内画像なら、窓の外や道路の見え方まで確認する。
    衣装なら、丈や背中の形まで揃えておく。

    今回の車内カットでは、画像側の違和感が動画にも残りました。

    一方で、ノクテルのマントのように、指示していても想定外のものが出ることはあります。

    Recastは便利ですが、失敗前提で何度も回すより、素材と指示を整えてから使うほうが向いていると感じました。

    画像を整えたうえで、必要な部分を具体的に指定する。

    そうすることで、やり直しを減らしていきたいですね。


    今回の検証結果まとめ

    今回の結果は、次のようになりました。

    • 複数の乗り物をコルベットに統一:成功

    • パンプキンへの置き換え:成功

    • 車内カットの衣装修正:成功

    • 車内の窓から見える景色をトンネルに変更:反映されず

    • ノクテルと専用バイクへの変更:成功

    • 海岸道路・古城へ続く石橋への背景変更:成功

    • 余計なマントの除去:衣装の説明を具体化して修正成功

    全体としては、かなり使いやすい映像に仕上がりました。

    特に良かったのは、元動画の気に入った走り方やカメラワークを活かしながら、作品に合わせて見た目を揃えられたことです。

    まとめ|気に入った走行映像を、別のキャラクターの出番に

    今回は、バス、バイパー、バイクの映像を組み合わせ、コルベットとパンプキンの走行シーンを作りました。

    さらに、その走行素材を使って、ノクテルと専用バイクの映像にも変更しています。

    一度作った映像を、別のキャラクターや乗り物でも活かせる。

    これは、登場人物の多いTHE HOLLOW PARADEの制作でも、役立つ使い方でした😊

    もちろん、今回のように修正が必要な場面もあります。

    それでも、気に入った映像を最初から作り直さず、必要な部分を変更できるのは魅力ですね。

    次回は、Recastのテンプレートを使った動画制作を紹介する予定です!

    最後まで読んでいただき、ありがとうございました!😊


    関連リンク

    今回のように、元動画の動きやカメラワークを活かして、キャラクターや乗り物を変更してみたい方はこちら。

    🔗 Pollo Recast
    https://tinyurl.com/2j29et35

    🔗 Pollo AI
    https://tinyurl.com/epv49yrx

    今回制作した走行シーンを取り入れたMVも、ぜひご覧ください🎃

    🎬 THE HOLLOW PARADE
    「Ghosts Racing Through the Night — 夜を駆ける亡霊たち」


     
     
    AIを使った画像・動画・音楽制作を楽しむ安達です。 企業PRやイベント参加、AIツールの検証など、実際に試して気づいたことを発信中! オリジナル作品『THE HOLLOW PARADE』や、AMIのコラムなど、ジャンルにとらわれず自由気ままに創作しています😊

    あなたへのおすすめ