メインコンテンツへスキップ
見出し画像

チャットさんに新しい仲間が増えました!Renoise MCPで『今日のオガワ』修学旅行編を作ってみた。

    『今日のオガワ』修学旅行編、開幕!

    修学旅行の朝。

    新幹線の発車時間が迫るホームに、必死に走ってくる女子高生が一人。
    背中には、登山にでも行くのかという巨大なリュック。
    さらに両手には、大きな旅行バッグが2つ。

    もちろん、我らがオガワですw

    ということで、『今日のオガワ』修学旅行編が始まりました!

    今回は東京から京都・奈良方面への修学旅行。

    いつもの日常とは少し違って、オガワ達と一緒に旅行しているような気分を楽しんでいただけたらと思っています。

    そして今回の修学旅行編は、短いエピソードを少しずつ公開していく予定で現在5話まで制作。本日は京都観光を夜に投稿予定です。

    新幹線での移動、観光地での珍道中、宿泊先での大騒ぎ。最後には、ちょっと青春を感じるようなシーンも作れたらいいなと思っています。

    まずは出発編。

    さて。今回のオガワは、いつもとちょっと違う方法で作っています。

    チャットさんに新しい仲間が増えました!

    以前、Pollo AIさんがMCPに対応したとき、ChatGPTとの会話から直接動画を生成できることに感動して、記事を書いたことがあります。
    <Renoise AI公式サイト>

    あれからしばらく。
    なんと、チャットさんに新しい仲間が増えました!

    以前から注目していたRenoiseさんが、ついにMCPに対応したんです。
    実はRenoiseさん、今回が初めてではありません。

    以前にも『今日のオガワ』を使って、おしゃれなPVを制作したことがあります。

    そのときの記事がこちら。

    ▶ 以前のRenoise制作記事はこちら

    あのRenoiseさんが、今度はいつものチャットから呼び出せるようになったわけです。

    ということで、今回もさっそく試してみました!

    そもそもMCPって何?

    MCPという言葉を初めて聞く方もいるかもしれません。
    正式には Model Context Protocol といいます。
    でも、難しい仕組みを覚える必要はありません。

    簡単にいえば、ChatGPTなどのAIから、外部サービスの機能を利用できるようにする仕組みです。

    今回なら、いつものChatGPTとの会話からRenoiseの動画生成機能を呼び出せます。

    つまり、ChatGPTと動画の内容を相談して、プロンプトを考えて、そのまま動画生成まで進められるということ。

    今までのように、作ったプロンプトをコピーして、別のサービスへ移動して、貼り付けて……という操作を減らせます。

    もちろん、MCPそのものが動画を作るわけではありません。
    実際に動画を生成するのは、Renoiseを通じて利用する動画生成モデルです。

    今回のオガワでは毎度おなじみのSeedance 2.5で制作。

    まずはRenoise MCPを接続してみる

    では、実際に使ってみましょう。

    最初に必要なのは、ChatGPTとRenoiseを接続すること。

    一度接続してしまえば、普段のチャットからRenoiseの機能を呼び出せるようになります。

    今回、実際の導入画面をキャプチャしておきました。

    画像
    【MCP接続画面のキャプチャ①】

    GPTさんの指示に従っておけばすぐつながります。

    初回は接続設定が必要ですが、次回以降は毎回接続し直す必要はありません。

    ここまでできれば、あとはChatGPTに動画の相談をするだけです。

    今回はオガワの修学旅行を作ってみます

    さて、接続できたところで実際に動画を作ってみます。

    今回作りたいのは、

    「修学旅行の新幹線に乗り遅れそうなオガワが、大量の荷物を抱えてホームを走ってくる」

    という30秒の動画です。

    ただ走って乗り込むだけでは面白くありません。
    撮影している友達も焦っている。
    ナカノも「早く早く!」と叫んでいる。
    カメラまで大きく揺れて、撮影者自身も慌てて新幹線に乗り込む。

    そんな、実際に女子高生がスマートフォンで撮影したような映像を目指します。

    まずはChatGPTと相談しながら、動画の内容を考えていきます。
    ここまでは、いつもの動画制作と同じです。

    キャラシ、音声、ファーストフレームを登録

    次に、動画に必要な素材を用意します。

    今回使用したのは、次の5点。

    • オガワのキャラクターシート

    • ナカノのキャラクターシート

    • オガワの声参照

    • ナカノの声参照

    • 動画のファーストフレーム(開始画像)

    キャラクターシートというのは、人物の顔や髪型、衣装などを統一するための資料です。今回のオガワには、修学旅行用として巨大リュックを背負ったキャラシを用意しました。

    【オガワのキャラシ画像】

    画像
    荷物がバグってるオガワ

    そして、動画の開始地点になるファーストフレーム。

    【新幹線ホームのファーストフレーム画像】

    画像
    大遅刻のオガワを待つナカノ

    これらをRenoise MCPで利用できるように画像と声を登録します。

    【画像・音声を登録しているチャット画面のキャプチャ】

    画像
    ひとまず登録。

    今回使ってみて便利だと思ったのが、一度登録した素材を、次の動画生成でも再利用できることです。

    例えば、オガワの声やキャラシを毎回登録し直す必要はありません。
    次のシーンを作るときにも、登録済みの素材を指定して利用できます。

    シリーズものを作るときには、ありがたい機能ですね。
    なお、初めて動画を作る方なら、ここまで素材を用意する必要はありません。

    まずはお気に入りの静止画1枚から試してみてもいいと思います。

    いよいよChatGPTから動画を生成!

    素材が準備できたら、動画の内容をChatGPTと相談しながらプロンプトにまとめます。

    今回は30秒。縦型の9:16。動画生成モデルはSeedance 2.5を指定。
    こんな感じの記述で出してたよ。企業秘密です。
    と言いながら秘密でもないので出しちゃうけどw

    オガワ修学旅行 EP01 CUT01 480P
    【参照アンカー】
    @material:430492:採用済みCUT1ファーストフレーム。冒頭の構図・新幹線乗降口・ホームの遠近・ナカノ左手前・遠景のオガワを基準に開始する。
    @material:430491:オガワの人物同一性と秋冬制服、パンパンの大型登山リュック、紺とベージュの両手旅行バッグの固定参照。
    @material:430493:ナカノの人物同一性、黒髪ショートボブ、クリーム色カーディガンと紺リボンの固定参照。
    @material:430489:オガワの声質・発声・イントネーション参照。サンプル音声中の台詞は使わない。
    @material:430490:ナカノの声質・発声・イントネーション参照。サンプル音声中の台詞は使わない。
    
    【30秒・縦9:16・連続ワンカット・音声付き】
    修学旅行に向かう女子高生の友人が東京駅・東海道新幹線の開いた乗降口でスマートフォン撮影している生々しい実写動画。カメラはナカノの斜め後方。ホームに沿って走るオガワは最初から見えている。撮影者は第三の女子高生で画面には映らず、声は別人。カメラ手ブレは撮影者の身体動作と完全連動。駅ホームには少数の一般客のみ、ほかの制服の学生は映らない。ナカノの衣装は参照どおりのクリーム色カーディガンで、不要なバッグを新設しない。
    
    0〜6秒:発車直前の駅チャイム。オガワは遠くから大荷物で必死に駆けてくる。ナカノ「オガワー!早くー!」、撮影者「やばい、もう閉まるよ!」。ナカノ肩越しのスマホ映像、小刻みな揺れ。
    6〜11秒:乗降終了の警告ブザー。オガワが接近、荷物に重量感。ナカノ「早く早く!」、撮影者「オガワ!閉まる閉まる!」。声はやや重なる。
    11〜18秒:撮影者「やばい、閉まるって!」。ナカノと撮影者は自分たちが乗り遅れないよう先にデッキ内へ慌てて退避。スマホが激しく揺れ、ナカノの背中やドア枠・デッキ壁・床を一瞬捉える。オガワは完全に画面外へ消え、連続した身体移動で車内へ入る。
    18〜23秒:撮影者が車内からホームへ勢いよく向き直り「早く!乗って!」。ちょうどオガワがリュックとバッグ2点ごと乗降口へ飛び込んでくる。急接近に驚いてカメラが揺れる。撮影者は終始車内。
    23〜26秒:オガワの身体と荷物が完全に車内へ入った直後、車両側面の乗降ドアがオガワの背後で現実的な電動音とともに閉まる。車両は停車したまま。
    26〜30秒:至近距離で息を切らすオガワ。オガワ「はぁ……危なかった……!」。ナカノと撮影者が安堵して小さく笑う。発話と呼吸は自然な尺に収める。
    
    【演出優先】見失う→撮影者が車内で向き直る→オガワが飛び込む、の連続性を最優先。オガワをカメラで追い続けない。カメラ位置は瞬間移動しない。登場人物の顔・髪型・制服・3点の荷物と声の一貫性を維持。実在駅に自然な環境音・足音・呼吸・警告音・ドア音。チャイムは特定の楽曲を模倣せず一般的な駅音。音声以外のBGM・字幕なし。

    そして、

    「この設定でRenoiseから動画を生成してください」

    とチャットさんにお願い。
    すると、生成に必要なクレジットの見積もりが表示されました。
    内容を確認して承認すると、そのまま動画生成が始まります。

    【見積もり・生成実行前の画面のキャプチャ】

    画像
    消費クレジットと残高が出ます

    別の動画生成画面へ移動して、プロンプトを貼り付け直す必要はありません。これで問題なければGPTチャット画面に出てくる生成ボタンを押す。

    ChatGPTとの会話から、直接Renoiseに動画生成を依頼できました。

    画像
    ドキドキのテスト生成

    そして完成した動画も、チャット上から確認できます。

    【チャット上に表示された生成動画のキャプチャ】

    画像
    はしゃぐチャットさん。

    これが今回のMCP対応で体験できることです。
    ちなみにこの動画はハチャメチャのでてズコーってなりましたけどねw

    もちろん、一発で完璧にはなりませんw

    ここは少しだけ制作の裏話。

    今回のオガワ、なかなか思いどおりには動いてくれませんでした。
    走ってくる途中で荷物の色が変わったり、カメラが予想外の方向を向いたり。

    ただ、ここはMCPの機能とは別のお話です。Seedance側の話なので。
    MCPはChatGPTから動画生成機能を呼び出す仕組み。

    実際の映像を作るのは動画生成モデルなので、複雑な動作や人物の再現には、まだ試行錯誤が必要です。

    今回も生成映像をCapCutで少し編集して、冒頭でご覧いただいた動画に仕上げました。

    ちなみに、オガワが勢い余って乗降口を通り過ぎてしまう場面。
    実はあれ、想定外の動きだったんです。
    でも、編集してみると意外と面白いw
    結果的に編集側で救って、オガワらしいシーンになりました。

    こういう偶然も、AI動画制作の面白いところですね。

    静止画の次は、動画を作ってみませんか?

    今回のRenoise MCPを使ってみて、改めて思ったことがあります。
    最近、私の周りでもAIで静止画を作ることを楽しんでいる方が増えました。
    素敵な風景やキャラクター、自分だけの世界を画像にする。

    それだけでも十分楽しいものです。

    でも、その画像が動き出したらどうでしょう。
    自分で作ったキャラクターが笑ったり、歩いたり、こちらに手を振ったり。

    静止画とはまた違った楽しさがあります。

    これから動画生成に挑戦してみたい方にとって、普段使っているChatGPTとの会話から制作を始められるのは、ひとつの便利な選択肢だと思います。

    最初から難しい映像を作る必要はありません。
    お気に入りの静止画を1枚用意して、

    「この画像を動かしてみたい」

    まずは、そんな一言から始めてみてはいかがでしょうか。
    ということで、今回はRenoise MCPを使った動画制作のご紹介でした!

    そして『今日のオガワ』修学旅行編は、まだまだ続きます。
    あの巨大リュックの中には、いったい何が入っているのか。
    日に日に皆さん気になってきてて中身どうしようか、というかオガワは何持ってきてるのか…

    引き続きお楽しみくださいw


    Renoise AIを試してみる →

    レッツジェネレートですね。
    (お前さんはいつもじゃねーか、というツッコミはなしで😭)

    可愛い!自分も作りたい!て思った人ー!スキ押してフォローお願いします🥺なにとぞぉぉ。
    コメントもドシドシね。

    #PR#RenoiseAI
    ※本記事はRenoiseのPRとして制作しています。

    この記事が参加している募集

     
     
    AI映像作家のハルです。SNS累計1,000万再生突破|Instagram1.4万人。AIショートドラマを一人で企画・制作。『TESSERACT』『遺言レシピ』『今日のオガワ』『堕天使』。制作工程・AIツール検証を発信中。企業PR・映像制作のご相談はDMへ。

    あなたへのおすすめ