メインコンテンツへスキップ
見出し画像

無人キャデラックに4人は乗せられる?Pollo Recastで車両変更と座席指定を試してみた【PR】

    こんにちは、安達です😊

    今回も、Pollo AIの「Recast」を使った検証をしていきます!

    これまで、キャラクターの置き換えや背景のアニメーションなど、いろいろな使い方を試してきました。




    🎬 Pollo Recast 検証シリーズ|記事一覧

    第1回 🔻

    第2回 🔻

    第4回 🔻

    第5回 🔻




    第3回となる今回は、乗り物の置き換えと、車内へのキャラクター追加に挑戦します。


    バスをスポーツカーに変えたり、バイクに変えたり。

    さらに、誰も乗っていないオープンカーに、4人のキャラクターを乗せることはできるのでしょうか?

    今回の検証では、乗り物の変更だけでなく、プロンプトの指定によって座席配置や自然な仕草まで反映できることがわかりました。

    実際に試した結果をご紹介します!🚗🔥

    ※この記事は、Pollo AI様からのご提供によるPR記事です。検証内容と感想は、実際の制作結果に基づいています。


    今回の検証|乗り物と乗員はどこまで変更できる?

    今回使用するのは、Pollo AIの「Recast」。

    元動画の動きやカメラワークを活用しながら、リファレンス画像を使って登場するキャラクターや背景などを変更できる機能です。

    🔗 Pollo Recastはこちら

    今回の検証では、主に次の3つを確認します。

    1. バスを別の乗り物に変更できるか

    2. 無人の車にキャラクターを追加できるか

    3. プロンプトで座席配置や自然な動作まで指定できるか

    それでは、順番に見ていきましょう!


    画像

    まず、今回の元になるバスの走行動画はこちらです。

    このバス動画をもとに、最初はダッジ・バイパーへ変更してみます。

    検証①|バスをダッジ・バイパーに変更!

    画像

    最初は、バスの走行動画を使った検証です。

    この動画の乗り物を、アメリカのスポーツカー「ダッジ・バイパー」に変更してみました。

    元動画のスピード感やカメラワークを引き継ぎながら、まったく別の車両として走らせられるのか?

    結果は……

    成功しました!🔥

    バスからスポーツカーへと車両が変わっても、元動画の走行演出を活用できました。

    乗り物の形状が大きく違っていても、こうした置き換えができるのは面白いですね。

    元動画のカメラワークや走行感が、どのくらい残っているかに注目して見てみてください。



    検証②|今度はバスをハーレーに変更!

    画像

    続いて、同じバスの動画を使って、今度はハーレータイプのバイクに変更してみます。

    四輪のバスから二輪のバイクへ。

    車両の構造も、乗り手の姿勢も大きく変わります。

    果たしてどうなるのでしょうか?

    こちらも、バイクらしい走行映像に置き換えることができました!🏍️

    同じ元動画でも、リファレンスを変更することで、まったく違った映像を作れることがわかりました。



    検証③|バイクをオープンのキャデラックに変更!

    ここからは、別の走行動画を使います。

    まず、MiniMax H3 MaxとSeedance 2.5で制作したバイクの走行映像を用意しました。

    それぞれのモデルで生成した映像の良い部分をつなぎ合わせたものです。

    このバイク動画を元に、今度はオープンのキャデラックへ変更してみます。

    使用したのは、次の3つです。

    • バイクの走行動画

    • 新しく作成した背景画像

    • キャデラックに乗るキャラクターの画像

    この組み合わせで、プロンプトなしで生成してみました。

    すると……

    なんと、誰も乗っていないキャデラックが走っていました!🤣

    このとき添付していた画像は、背景とキャデラック、そしてキャラクターが一緒に写っているものでした。

    画像
    画像

    背景は問題なく反映されていたのですが、車とキャラクターが同じ画像に入っていたことで、キャラクター部分が少し識別しにくかったのかもしれません。

    そのため、キャデラックはきれいに生成されたものの、乗っているはずのキャラクターは反映されず、無人の車になってしまったのではないかと考えています。

    もちろん、これは自分なりの予想です。

    そこで次からは、元動画には無人キャデラックの動画を使い、キャラクターはそれぞれ個別のリファレンス画像として指定する形に変えました。

    キャラクターは消えてしまいましたが、キャデラックそのものはきれいな走行映像になりました。

    しかも、THE HOLLOW PARADEの世界では、無人の車が走っていても不思議ではありません。

    これはこれで、作品に使えそうです。

    画像

    想定とは違いましたが、映像素材としては成功!



    検証④|無人キャデラックに4人のレディを乗せたい!

    ここからが今回の本題です。

    せっかく無人のキャデラックができたので、この車に4人のキャラクターを乗せてみることにしました。

    登場するのは、THE HOLLOW PARADEの世界に登場する4人のレディたち。

    • ノクテル

    • 赤リボン少女

    • ヴェール少女

    • ラビット

    まずは、無人キャデラックの動画に4人のキャラクターリファレンス画像を添付します。

    プロンプトは指定せず、そのまま生成。

    結果は……

    誰も乗りませんでした!😂

    車は走っているのですが、4人のキャラクターは登場しません。

    以前のバスの検証でも、車内の人数が増えなかったことがありました。

    今回も、画像を添付するだけでは新しい乗員を追加できなかったようです。

    ※動画③の無人キャデラックとほぼ同じ結果になったため、今回は動画の掲載は割愛します。


    検証⑤|プロンプトで4人の乗車を指示!

    それなら、今度はプロンプトで明確に指示してみましょう。

    今回指定したのは、

    「無人のキャデラックに、リファレンス画像の4人全員を乗せる」

    という内容です。

    さらに、左ハンドルの車であること、運転席・助手席・後部座席にそれぞれ人物を配置することも指定しました。

    結果は……

    4人とも、普通に乗りました!!😆🔥

    運転手になったのは、ノクテル。

    ほかの3人も車内に配置され、4人を乗せたキャデラックの走行映像が完成しました。

    髪が風になびいたり、衣装が揺れたりと、自然な動きも見られました。

    プロンプトなしでは乗らなかった4人が、指示を追加することで全員乗車できた。

    これは今回の検証で、とても大きな違いでした。



    画像

    検証⑥|キャラクターに自然な動きを追加できる?

    4人を乗せることには成功しました。

    次は、乗っているキャラクターたちの動きを少し増やしてみます。

    運転手には自然なハンドル操作。

    助手席には運転手の方を見る仕草。

    後部座席の2人には、視線を交わしたり、頭や手を動かしたりする演技を指定しました。

    最初は、あまり変化がないようにも感じました。

    ところが、改めて確認してみると……

    赤リボン少女がノクテルの方を見るなど、ちゃんと動きに変化がありました!

    大きなアクションではありませんが、車内での自然な仕草が追加されていました。

    細かな動きは見落としやすいので、生成後にじっくり確認することも大切ですね。


    画像

    検証⑦|プロンプトだけで座席を指定できる?

    最後に、もう一つ試してみました。

    これまでの検証では、ノクテルが運転手になっていました。

    では、画像の添付順を変えずに、プロンプトだけで運転手や座席の位置を変更できるのでしょうか?

    今回は、4人の配置を次のように指定しました。

    • 運転席:ラビット

    • 助手席:ヴェール少女

    • 後部座席・運転手側:ノクテル

    • 後部座席・助手席側:赤リボン少女

    キャラクターの名前だけでなく、リファレンス画像にある容姿や衣装の特徴も合わせて指定しました。

    さらに、運転手のハンドル操作、乗員の視線や仕草、風になびく髪や衣装なども指示しています。

    結果は……

    指定した座席配置に成功しました!!🎉

    ラビットが運転手になり、ほかの3人も指定した位置に座っています。

    しかも、キャラクターの自然な動きも表現されていました。

    画像の添付順を変えなくても、プロンプトで座席を指定できたわけです。

    これは、今後の複数キャラクターを使った動画制作でも役立ちそうですね!



    今回の検証結果まとめ

    今回の結果をまとめると、次のようになりました。

    • バス → ダッジ・バイパー:成功

    • バス → ハーレー:成功

    • バイク → 無人キャデラック:車両変更に成功

    • 無人キャデラックに4人追加(指示なし):乗車せず

    • プロンプトで4人を追加:成功

    • 乗員の自然な動作を追加:成功

    • プロンプトで4人の座席を個別指定:成功

    今回の検証では、プロンプトなしで無人キャデラックに4人を追加することだけが、期待した結果になりませんでした。

    それ以外は、今回の素材と条件では、かなり狙った結果に近づけることができました。

    もちろん、今回成功したからといって、すべての動画で同じように再現できるとは限りません。

    ただ、人物の追加や座席配置を明確に指示することで、表現できる範囲が広がることは確認できました。

    特に重要だと感じたのは、リファレンス画像を添付するだけでなく、

    「誰を」
    「どの座席に」
    「どんな動きで」

    配置したいのかを、プロンプトで具体的に伝えることです。


    まとめ|Recastは、乗り物だけでなく車内の演出にも使える!

    今回は、バスからスポーツカー、バイクへの変更に始まり、最後は4人のレディたちをキャデラックに乗せるところまで試してみました。

    特に印象的だったのは、プロンプトの有無による結果の違いです。

    リファレンス画像を添付するだけでは4人は登場しませんでしたが、乗車位置を指定することで、全員を車内に配置できました。

    さらに、座席の変更や自然な仕草まで表現できたのは、大きな収穫です。

    そして何より……

    誰も乗っていないキャデラックが走る映像も、個人的にはかなり気に入っています!🤣

    想定外の結果から、新しい映像のアイデアが生まれる。

    こういうところも、AI動画制作の面白さですね。

    今回作ったキャデラックの映像は、THE HOLLOW PARADEの世界でも活用していきたいと思います。

    これからも、実際に作りながら、いろいろな可能性を試していきます!

    最後まで読んでいただき、ありがとうございました!😊


    関連リンク

    今回のように、元動画の動きやカメラワークを活かしながら乗り物やキャラクターを変更したい方は、ぜひPollo Recastをチェックしてみてください。

    作品の雰囲気を見たい方はこちら。

    🎬 THE HOLLOW PARADE|ハロウィンMV『Split the Night』


    Pollo AIをチェックしたい方はこちら。
    🔗 Pollo AI
    https://tinyurl.com/epv49yrx


    今回の検証で使用したRecastはこちら。
    🔗 Pollo Recast
    https://tinyurl.com/2j29et35


    今回の検証で使用したRecastは、乗り物の置き換えだけでなく、車内へのキャラクター追加や座席配置の指定にも活用できました。


    #PolloAI #AI動画生成 #動画制作 #生成AI #PR

     
     
    AIを使った画像・動画・音楽制作を楽しむ安達です。 企業PRやイベント参加、AIツールの検証など、実際に試して気づいたことを発信中! オリジナル作品『THE HOLLOW PARADE』や、AMIのコラムなど、ジャンルにとらわれず自由気ままに創作しています😊

    あなたへのおすすめ