メインコンテンツへスキップ
見出し画像

Seedance2.0でつくる コラージュアニメーション

    こんにちは、tapehead.labと申します。
    AIを使ってMVを制作しています。XとYouTubeをメインに活動しています。

    映像の作り方を聞かれることが多くなってきたので、これからチュートリアル的なものはnoteに残していこうと思います。

    今回取り上げるのは、こちらのMV

    🎬New MV【かわいそうな知性】
    新しいMVつくりました!

    映像はseedance2.0を使用したコラージュアニメーション
    音楽は「自然状態」をテーマにしています
    頭からっぽにして見てね🍿 pic.twitter.com/PGy5UUY11D

    — tapehead.lab (@tapehead_Lab) May 13, 2026

    AIだから達成できる(というか普通やらない)怒涛のコラージュアニメーションです。「楽器の一つとして映像を使う」イメージで制作しました。

    このMVのワークフローを解説します。


    ① Midjourneyで画像生成

    まずは画像生成です。
    今回はコラージュ素材として使うので、完成した1枚絵というより

    「断片的な素材を集める」イメージでさまざまな画像を作成します。

    画像
    Midjourneyの生成一覧


    srefを組み合わせたり、生成した画像をスタイルリファレンスにしたりして
    気に入ったスタイルをつくっていきました。↓

    画像
    生成した画像のパラメータ。chaosの数値を上げるといい具合に出力がばらけたりします。


    画像の選び方は感性で!
    人物だけではなく一部のパーツや抽象的なオブジェクトなど、
    バランスよく選んでいきます。

    今回使ったのはこの20枚↓

    画像

    画像が用意できたら動画生成に進みます!


    ② Seedance2.0で動画生成

    私はRunwayからSeedance2.0を使いました。

    ・ノードベースのワークフローがめちゃ便利!
    ・Unlimitedでクレジット気にせず生成試せる
    (RunwayのUnlimitedプランは新規契約終了。使ってる人も2026年8月で終了みたいです、、、)

    この2点が気に入ってRunwayを使っています。

    やることは
    ・5枚の画像をセットにしてリファレンス入力
    ・プロンプトを入力

    これだけです。

    Runwayのノード

    画像
    Runwayのノードは使いやすくて管理も楽

    ポイントは

    スタートフレームではなくリファレンス指定で入力すること

    Seedance2.0のリファレンス性能はホントにすごくて、画像が持つ世界観をそのまま拡張して動画にしてくれます。

    出力に自由度も出るので、リファレンス入力はオススメです。

    画像
    画像は全部 Ref Imageに入力


    プロンプトは?

    あくまで1例ですが、こんな構造で作ってます。

    ①リファレンス指定の指示
    ②全体のスタイルやテンション、方向性の指示
    ③カットごとの具体的な動きの指示

    reference: Image 1, Image 2, Image 3, Image 4, Image 5
    format: 15s continuous
    style: abstract art animation, hand-drawn
    
    directive: Extract every form, motif, color, and texture from the references. Every transformation seamless. Entire composition transforms continuously including background.
    
    sequence:
    
      0-1.5s
      A figure's silhouette fills with a new color seeping inward while its outline detaches and drifts upward. The background inverts to a complementary color. The surface texture flows downward against the direction of the color seep.
    
      1.5-3s
      The drifting outline distorts into a new shape while still moving. The color fill stretches into a long drip under gravity. A new form crystallizes in the empty space between them. All three move simultaneously in different directions.
    
      3-4.5s
      The crystallized form stretches paper-thin then flips like a page. Both sides visible simultaneously during the flip. Background carried into a new configuration by the flip. Forms on the revealed back side already mid-motion before fully visible. Ripples from the flip axis travel outward across every adjacent element.
    
      4.5-6s
      Every form simultaneously casts its shadow in a different direction. Each shadow elongates at a different speed and wraps around a different adjacent form, pulling its color away. Original forms fade as shadows brighten. The frame reorganizes around shadow positions rather than original positions.
    
      6-7.5s
      Solid shadow forms arc and leave thick color trails. Where two trails cross they merge into a new form that immediately arcs and leaves its own trail. Original shadow forms continue unaffected. The frame contains shadow forms, trail-born forms, and fading trails all moving simultaneously.
    
      7.5-9s
      The entire composition compresses downward simultaneously — maximum compression held one frame. Then releases upward at once, every element smearing vertically for three frames before landing in completely new positions.
    
      9-10.5s
      Every form sends its surface texture to its neighbor. Each neighbor moves with the physical behavior of the received material — liquid texture flows, rigid texture moves angularly. Forms that gave textures away begin behaving as whatever they receive in return.
    
      10.5-12s
      Every form rotates 180 degrees revealing a back face of completely different color and texture. Revealed faces reach toward adjacent forms. Each reached form rotates in turn. The cascade crosses the entire frame, each rotation revealing a new color world that reaches toward the next form.
    
      12-13.5s
      Every boundary dissolves simultaneously. Merged zones differentiate into new forms sharing properties of both parents but identical to neither. Those new forms border new neighbors whose boundaries immediately begin dissolving. The cycle accelerates continuously.
    
      13.5-15s
      Every process from every previous state runs simultaneously — outlines detaching, fills dripping, shadows pulling color, trails solidifying, textures migrating, rotations cascading, boundaries dissolving — all at once, every element doing multiple things simultaneously, to the last frame.
    画像
    こんな風にコラージュされた!

    今回はこの5枚→コラージュのノードを、4セット組みました。

    プロンプト次第で様々な動きに変えながらコラージュできます。
    (Seedance2.0はとにかくプロンプトです。プロンプト次第で出力が大きく変わります。)

    リファレンスの世界観を保ちながらも、画像に縛られず自由に映像を広げられるのがSeedance2.0の素晴らしいところですね。

    画像
    画像
    リファレンスからの拡張性能が高すぎる


    ③楽しい編集作業

    ちなみに、今回出力した素材の数は、「15秒✖️88本」

    トータル20分超え

    のコラージュアニメーション素材です。

    画像
    出力した素材達。Runwayのファイル名、どうにかなりませんかね、、、


    普通、こんな贅沢なアニメーションの使い方はできないです。
    AIだからできる暴挙!

    でも、こういうプロセスを踏めるからこそ作れる映像があると思っていて、
    そこに魅力を感じています。

    あとは思うがまま編集するだけ!

    画像
    編集は結構細かくしています。

    ちなみに今回は、映像を生成した後に音楽を作りました。

    このコラージュアニメーションに耐えられる音楽にしないと、成立しないなと思ったので。

    こういう形で逆プロセスを踏めるのも、AIならではかもしれません。

    (カオスに見えますが、映像から歌詞にしてる部分も多いので意外とリンクしてます。見てみてね!)


    では、また次回お会いしましょう🙌



     
     
    AIで映像と音楽つくってます。

    あなたへのおすすめ