メインコンテンツへスキップ
見出し画像

Renoise MCP|バズ動画のリメイクに挑戦|実写から2Dアニメへ変化する25秒CM制作‼


    こんにちは、Mariyaです!(=゚ω゚)ノ✨

    ※Renoise AI様のPR記事でございます。

    今回は、「Renoise MCP」を使って、バズ動画の演出を
    参考にしたオリジナルCM制作に挑戦しました!🎥✨

    ChatGPTからRenoiseの生成機能を呼び出し、動画や音楽を制作。
    最後は編集も加えて、約25秒の作品に仕上げています。

    👇まずは完成作品からどうぞ!👇


    今回のテーマは、実写から2Dアニメへ変化する世界。

    参考にしたのは、人物の上をスキャン光が通過するたびに
    衣装や背景が切り替わっていく動画です。
    ※著作権への配慮から、参考動画そのものの掲載は控えています。

    人物は自然に動き続けているのに
    光が通過した部分から世界観が変わっていく。

    この演出が面白くて、私も挑戦してみたいと思いました✨


    今回は、普段のように生成サイトを一つずつ操作するのではなく
    ChatGPTにRenoise MCPを接続し、会話しながら制作を進めました!

    📝 企画を相談
    🎥 動画生成
    🎵 音楽生成
    ✂️ 最後は編集して完成!

    ChatGPTとの会話からRenoiseの生成機能を呼び出せるのが
    今回の制作方法です!🌸✨

    生成した素材は、ChatGPT側で編集し
    一本のCMに仕上げました!( *´艸`)💕


    Renoise MCPとは?何ができるの?

    画像

    ChatGPTから指示を出すことで
    Renoiseの生成機能が動いてくれるんです!
    ✨

    (※💎 Renoise MCPはChatGPT専用ではありません。
    Claude、OpenClaw、Hermes Agent、Doubao Work、WorkBuddyなど、複数のAIアシスタントから利用できるのも特徴です。)


    画像

    接続する際は、このように出るので「許可」を
    クリックして進めましょう(*´ω`*)✨

    ChatGPTは「プラグイン」を選択👇

    画像
    画像

    検索して起動しましょう👆(。-`ω-)


    普段、AI動画を制作するときは、画像を用意してから
    動画を生成し、音楽や効果音を追加して
    最後に編集するという流れになりますよね(´っ・ω・)っ💻

    Renoise MCPの魅力は、ChatGPTとの会話を通じて
    Renoiseの画像・動画・音楽生成機能を利用できること✨

    生成サイトを何度も行き来せずに、制作できるのは
    本当に便利です!



    企画から完成までのワークフロー

    📝企画 → 🖼️画像 → 🎥動画 → 🎵音楽 → ✂️編集

    💎 企画・素材準備
    ChatGPTで作りたい映像を相談し、構成や必要な素材を整理します。

    💎 動画・音楽生成
    ChatGPTから、Renoiseの生成機能を呼び出し
    目的に合わせてモデルを使い分けながら制作できます。

    💎 編集・仕上げ
    今回の制作では、生成した動画や音楽をChatGPT側で
    組み合わせ、一本の作品に仕上げました。

    Renoise MCPで動画・音楽を生成し、最後の編集はChatGPT側で行う。

    今回はこの流れで、別の編集ソフトを開かずに
    約25秒のCMを完成させました!(o´・ω-)b✨

    私が面白いと感じたのは、動画を一つ生成して終わりではなく
    前の制作結果を踏まえながら、次の工程を相談できるところ。

    では、実際にどんな流れで制作したのか紹介していきます!



    今回の企画は、実写から2Dアニメへ!

    今回のテーマは、バズ動画の演出を分析し
    自分なりの映像に作り替えることです(`・ω・´)ゞ

    参考動画で特に注目したのは、次の3点でした。

    💎 構成:光が通過するたびに世界観が変化する
    💎 テンポ:短い間隔で変化を見せ、視聴者を引きつける
    💎 動き:人物の動きを途切れさせず、自然につなげる

    実際の相談画面👇

    画像

    この特徴を参考に、今回は実写から2Dアニメへ
    変化するオリジナル映像を考えました。

    前半はスキャン演出を中心に、後半ではアニメ調のカフェへ場面を移し
    最後に「Renoise」の文字を見せる構成です。

    単に映像を切り替えるのではなく、光の動きをきっかけに
    自然に世界観が変わる作品を目指しました∑d(d´∀`*)グッ!

    さて、実際にどこまで再現できたのでしょうか?



    実際に制作してみよう!

    実際の回答画面も載せていきます( *´艸`)💕

    画像
    画像

    こちらはクリックすると画像を登録できる仕組みなんです!

    ① 画像素材の準備!

    まずはChatGPTとRenoise MCPを接続し
    アカウント情報を確認して制作を開始しました。

    最初に取り組んだのは、動画に使用する画像素材の準備です。

    画像

    今回は背景と人物を分けて、用意する予定だったので
    Midjourneyで背景素材を生成することにしました。

    ところが……。

    背景だけが欲しかったのに、人物まで生成されてしまいました! 💦

    人物には別の参照素材を使用する予定だった為
    この画像では、目的に合いません(;´・ω・)

    何が問題だったのか?見直してみました👀💦

    今回必要だったのは、背景だけの画像と
    別に用意したキャラクターの参照画像です。
    最初の指示では、それぞれの素材をどのように使用するのか
    十分に伝えられていませんでした。

    そこで、背景と人物を別々の素材として扱うように指示
    動画生成に使用する素材を揃えました!(`・ω・´)ゞ🌸✨

    💎 改善したポイント

    普段はMidjourneyのパーソナライズ設定を活用していますが、今回は制作環境が異なるため、指示の伝え方を見直しました。
    背景と人物を別々の素材として指定し、それぞれの用途を明確に伝えるようにしました。
    今後も使用する生成環境に合わせて、プロンプトや素材の指定方法を調整していきたいと思います!✨

    MCPを利用する際は、普段の生成方法との違いも意識しながら
    具体的に指示する必要があると感じました!✨



    ② スキャン演出に挑戦!

    画像を準備したら、いよいよRenoiseで動画生成です!🎥✨

    今回の見せ場は、スキャン光が人物を通過することで
    実写から2Dアニメへ世界観が変化していく演出です。

    人物の動きを自然につなげながら、光の通過に合わせて
    画風が切り替わる映像を目指しました!(=゚ω゚)ノ✨

    実際に生成してみると、スキャン光が指定とは異なる方向から現れたり、前後のシーンで動きが合わなかったりすることも……!( ̄▽ ̄;)💦

    そこで、光の移動方向や前のシーンとのつながりを具体的に指定し直し、再生成を試しました。

    ただ、人物の動きとスキャン光の方向を同時に制御するのは難しく、別の方法を考えることに!

    💎 改善したポイント

    最初の方法: スキャン光を動かし、人物と背景を同時に2Dアニメへ変化させる。
    変更した方法: スキャン光による人物の変化を優先し、背景の変化は別のシーンへの切り替えで表現する。

    一度にすべてを変化させるのではなく、見せたい演出を
    絞る方法に変更しました!

    これによって、スキャンによる人物の変化を
    前半の見せ場として生かし、後半のシーンへ展開する構成に✨

    当初目指していた演出とは少し異なりますが
    生成結果に合わせて見せ方を工夫できたのは
    大きな収穫でした!( *´艸`)💕

    次は、今回使用した生成モデルについて紹介していきます。

    ※今回の結果には、使用した生成モデルの特性だけでなく
    私自身がまだMCPの活用に慣れていないことも
    影響していると考えています。
    その為、今回の検証結果だけでRenoise MCP自体の性能を
    判断するものではありません。


    ③ 生成モデルを変えて再挑戦!

    スキャン演出を試行錯誤する中で、生成モデルも使い分けてみました!

    今回使用したのは、MiniMax H3 MAXとSeedance 2.0です。

    MiniMax H3 MAXでは、人物を実写から
    2Dアニメ調へ変化させる映像に挑戦!(`・ω・´)ゞ🌸

    人物の変化は表現できたものの、背景まで
    アニメ調に切り替えることはできませんでした。

    そこで、後半の映像はSeedance 2.0で制作✨

    カフェのシーンへ展開し、看板には「Renoise cafe」
    最後には「Renoise」の文字を取り入れる構成へ変更🌸

    💎 改善したポイント
    一つのモデルですべての演出を再現しようとせず、シーンの目的に合わせて生成モデルを変更しました。
    前半はMiniMax H3 MAXで人物の変化を中心に、後半はSeedance 2.0でカフェシーンを制作。

    それぞれのモデルの生成結果を生かしながら
    映像を組み合わせる方法に切り替えました。

    その結果、約10秒の前半映像と約15秒の後半映像をつなぎ
    25秒のオリジナルCMとして完成させることが成功!✨

    それぞれのモデルによって
    キャラシートの反映や、グラフィックが全く違うので
    好みも分かれると思います(=゚ω゚)ノ💓

    今回、特に便利だと感じたのは、
    ChatGPTとの会話からRenoiseの生成モデルを切り替えられること!

    クレジット残高や生成設定も確認しながら進められるので
    モデルを変更して試したいときもスムーズでした∑d(d´∀`*)グッ!

    モデルを選べることは強みですが、異なるモデルで生成した
    映像を自然につなげる工夫も大切ですね!( *´艸`)💕



    動画ができたら、次は音楽制作!

    前半と後半の映像素材を用意したら、次はBGMです!🎵✨

    今回は、約10秒の前半映像と約15秒の後半映像を組み合わせ
    約25秒のCMにする構成です。

    映像の流れが決まったので、音楽もRenoiseの
    生成機能を使って制作してみることに(*´ω`*)

    最初に生成した音楽を聴いてみたのですが……。

    なんだかスーパーで流れていそうなBGMの雰囲気に!😂

    今回作りたいのは、もう少し優雅で
    映像の変化に合わせてリズムよく展開する音楽です。

    そこで、曲の方向性を見直してみました!👀✨

    💎 改善したポイント
    最初のイメージだけでは雰囲気が伝わりきらなかったため、チェロとコントラバスを使用した、リズム感のあるオーケストラ調へ変更しました。

    楽器や曲調を、具体的に指定して再生成したことで
    より自分のイメージに近い音楽に仕上げることができました!✨

    画像

    私が普段使うBGMは、オルゴールやコントラバス
    チェロを組み合わせたものが多いです!

    光と闇の表現にもばっちりなんですよね~( *´艸`)💕

    今回は、映像のテンポを邪魔せず、最後の「Renoise」の
    演出に向けて自然に盛り上がる音楽を目指しました。

    動画だけでなく、音楽もChatGPTとの会話から
    Renoiseで生成
    出来るのは便利ですね!∑d(d´∀`*)グッ!✨

    生成結果を実際に聴きながら、好みに合わせて
    方向性を調整できたのも良かったところです!



    最後は編集で一本の作品に!

    動画と音楽を準備したら、いよいよ最後の仕上げです!🎬✨

    今回は、Renoise MCPを通じて生成した約10秒と
    約15秒の動画をつなぎ、約25秒のCMに仕上げます。

    まず、Renoiseで生成した動画と音楽を
    それぞれダウンロードし、ChatGPTに渡しました。

    画像

    ここからは、ChatGPT側で編集作業を進めていきます!

    2本の動画を結合し、BGMを映像の長さに合わせて調整。
    さらに、左上にRenoiseのウォーターマークを追加しました。

    ここで大切なのは、動画をつなげるだけでなく
    シーンの切り替わりと音楽のタイミングを合わせること。

    それぞれの映像が綺麗でも、テンポが合わなければ
    作品全体の印象が変わってしまいます。

    今回は音楽の長さも調整しながら、一本のCMとして
    完成させることができました!ヾ(o´∀`o)ノ✨

    💎 今回の制作で担当した役割

    Renoise MCP: ChatGPTから生成指示を送り、Renoiseの機能で動画と音楽を制作。
    ChatGPT側: 生成した動画の結合、BGM調整、ウォーターマークの追加。

    今回は、Renoiseの編集機能「Director Mode」は使用せず
    ChatGPT側で仕上げました。

    普段は複数のツールを行き来することも多いので
    別の編集ソフトを開かずに一本のCMを完成させられたのは
    とても便利でした!(o´・ω-)b✨


    また、Renoiseには「Director Mode」という
    編集機能もあることを知りました!( ̄▽ ̄;)


    次回はこちらもたくさん触って、色々な制作に
    挑戦していきたいと思います!( *´艸`)💓



    Renoise MCPを使って感じたこと

    今回の制作では、スキャン演出や生成モデルの使い分けなど
    色々な試行錯誤がありました(*´ω`*)✨

    その中でも特に便利だと感じたのは、ChatGPTとの会話から

    Renoiseの生成機能を呼び出し、制作を進められること!

    実際に使って感じた良かったところと、気になったところをまとめます。


    とてもいい所(=゚ω゚)ノ✨

    💎 会話しながら制作を進められる
    ChatGPTに作りたい映像を伝えることで、接続したRenoiseが
    生成を進めてくれます。
    生成結果を確認しながら、次の指示を相談できるので
    企画から素材制作まで一つの流れで進められるのが便利でした!✨

    💎 目的に合わせて生成モデルを使い分けられる
    今回使用したMiniMax H3 MAXとSeedance 2.0では
    キャラクターの再現や映像の表現に違いがありました。
    複数のモデルから選択できるため、作品の目的に合わせて
    制作方法を柔軟に考えられる
    のは魅力ですね!


    💎 動画だけでなく音楽も生成できる
    映像に合わせたBGMも、Renoiseの生成機能を使って制作できました。
    動画と音楽を同じ会話の流れで用意できるので
    短いCMのような作品にも、活用しやすいと感じました!( *´艸`)💕


    💎 クレジットや生成設定を確認できる
    ChatGPTとの会話から、Renoiseのクレジット残高や
    生成設定を確認できるのも便利なポイント!
    使用するモデルや設定を確認しながら、制作を進められるので
    クレジットの消費を意識しながら計画的に生成できます!∑d(d´∀`*)グッ!


    気になったところ👀

    💭 複雑な演出には工夫が必要
    スキャン演出のように複数の動きを組み合わせる場合は
    優先する動きを絞り、生成結果に合わせて
    構成を調整すること
    が大切だと感じました。

    💭 参照素材の指定は具体的に
    人物と背景を別々に使用する場合は、素材ごとの役割を
    明確に伝えることで、意図しない生成を減らせると考えています。

    今回の検証を通して、Renoise MCPの便利さと
    生成モデルの特性は分けて考える必要がある
    と感じました(`・ω・´)ゞ✨


    私自身もまだMCPの活用に慣れていない部分があるので
    これからも使い方を工夫しながら
    制作の幅を広げていきたいと思います!(,,•ω•,,)و🌸
    少しでも参考になれば幸いです(* ᴗ͈ˬᴗ͈)✨

    最後まで読んでくださりありがとうございます!
    Renoise AIさんは、CPPも募集してるよ!👇✨

    CPP活動もしております‼‼
    Xでも配信しておりますのでよろしくお願いいたします✨




    コンテストもやっているので、ぜひ覗いてみてねん!
    Renoise AIさん、とても活発に発信されてるよ( *´艸`)💕

    Renoise AIでは、クレジットだけ購入も可能!!

    画像
    ※11/10現在の料金表です。

    料金表です✨

    画像
    ※11/10現在の料金表です。



    最後まで読んでくれてありがとうございます💓
    皆さんからの、コメント、スキ、マガジン追加も
    とても励みになっております✨💗

    画像

    これからも応援してねーん!✨💗
    Xでも活動中です!(`・ω・´)ゞ

    #つづけたDay
    #3日間チャレンジ
    #画像生成AI
    #白銀の髪同盟
    #共同運営マガジン
    #AIイラストアイラ
    #創作あそびUP系
    #アカリウム
    #Renoise
    #RenoiseAI
    #白銀マリヤ
    #MCP
    #プラグイン
    #RenoiseMCP


    この記事が参加している募集

     
     
    ‪🫶HSP×INFP⇆INTP🍀👩‍🔬 AIと一緒に、好きなものを好きなように創作🎨 イラスト・映像・MV|AIツール検証&レビュー🎥 制作のことから日々思うことまで綴る✍️ 企業案件・PR記事・レビュー多数実績あり✨ ご依頼・ご相談・お問い合わせはDMまで📩 Xでも活動中です!📱

    あなたへのおすすめ