メインコンテンツへスキップ
見出し画像

ゲームに登場するボス動画を制作|制作フロー|Pollo AI|たくさんのモデルを試行錯誤して頭抱えた話


    みなさん、こんにちは~(。・ω・。)ノ💗

    ※Pollo AI様のPR記事でございます✨

    ZarGates様から
    「ボス制作イベントに参加しませんか?」
    という、一件のDMが届き…

    今回の制作が始まったきっかけは
    Tales of ValdirのBOSS制作イベントへの招待でした✨

    主催者から、直接お声がけいただき
    「せっかくなら、自分にしか作れないBOSSを作りたい!」
    と、参加を決意∑d(d´∀`*)グッ!🌸✨

    ウォーターマーク禁止なので…悩みましたが
    Pollo様にお話して、なんと!協力していただけることに😭✨
    ありがとうございます(* ᴗ͈ˬᴗ͈)💗✨

    あっ!と、思い出したのが、以前から描いていた顔のない異形です。
    (私のお気に入りでカッコいい異形さん)

    一枚のイラストだった異形を、本当に戦えるゲームBOSSへ!

    Pollo AIを使った試行錯誤が始まりました(`・ω・´)ゞ✨


    今回は、私が制作した「異形BOSS」の
    制作フローをまとめていきます(,,•ω•,,)و🌸

    今回使用した、機能とモデルです!

    💎「Wan 3.0」
    💎「Seedance2.5」
    💎「リファレンスから動画へ」
    💎「テキスト読み上げ」


    私が、いつも使用しているAIとアプリです📱💻

    ◽nijijourney・Midjourney(イラスト)
    ◽ChatGPT(プロンプト)
    ◽Tad.ai(音楽生成AI)
    ◽Pollo AI(動画生成)
    ◽CapCut(動画編集)

    一緒にチャレンジしてみない?

    パソコンの方は( *´∀`)ノ 💻✨
    Pollo AI体験する
    👆こちらをクをリック~👆

    モバイル版もございます👇🌸

    画像




    まずは、作品からどうぞ👇🌸


    今回目指したのは、ただ綺麗なAI動画を作ることではありません。

    「テレビゲームをプレイしていたら、そのままBOSS戦のムービーに入ったような映像」

    すごく意識した部分です


    そのため、ひとつの動画生成モデルだけに頼るのではなく
    Pollo AIの中でいくつかのモデルを実際に試しながら
    作品との相性を確認していきました!✨

    結果として制作の基盤に選んだのが、「Wan 3.0」です!
    ふふっ…意外でしたか??

    「Seedance2.5」だろう!って思った方々!
    「Wan 3.0」もいいモデルでしたよ( *´艸`)💓✨

    完成するまでには
    かなりの試行錯誤がありましたよ(。•́ – •̀。)シュン…



    まずは「異形」をBOSSにする

    今回のBOSSは、この企画のためにゼロから考えた
    キャラクターではありませんヾ(〃^∇^)ノ


    以前から私がイラストで描いていた「異形」をもとにしています!

    画像
    かっこいい( *´艸`)💓✨

    顔がなく、人間に近い姿をしているのに、明らかに人ではない。

    首元からは黒く深い赤を含んだ靄が揺らぎ
    身体には傷跡が残っている。

    私の中にすでに存在していたこのキャラクターを
    今回は「ゲームのBOSS」として動かしてみることにしました✨

    一枚のイラストとして、成立することと
    動画の中で同じキャラクターとして
    動き続けることは、別問題です。

    そこで最初に用意したのが、異形のキャラクターシートでした。

    画像
    ちょっと変わったけど、元絵も参照するのでよし!


    正面だけではなく、横や後ろから見た姿も含めてデザインを整理。

    動画生成AIが角度を変えても「同じ異形」と認識しやすいように、まず静止画の段階で情報を固めていきました。

    これは今回、かなり重要な下準備になっています。



    プレイヤー側には、マリヤを配置

    BOSSだけでは、ゲームのBOSS戦にはなりません。

    対峙するプレイヤーとして登場させたのが
    私のオリジナルキャラクター「白銀マリヤ」です。

    今回は普段の姿ではなく、女聖騎士としてデザインしました。

    画像
    セミリアルにするのでこのくらいが丁度いい

    こちらもMidjourneyを使用し
    動画生成に入る前にキャラクターシートを作成しています。

    AI動画では、カットが変わった瞬間に顔や衣装が
    変化することがあります。

    カメラを頻繁に切り替える作品では、それが大きな問題になります。

    だからこそ、

    「動画を作りながらキャラクターを決める」のではなく
    「キャラクターを決めてから動画へ持っていく」

    この順番を大切にしました( ㆆ-ㆆ)و✨



    舞台は、神聖なダンジョン

    次に考えたのがフィールドです!

    異形の不気味さを強調するために
    最初から暗く禍々しい場所にする方法もありました。

    私は、あえて逆にしました✨

    選んだのは、白い大理石や巨大な柱が並ぶ神聖なダンジョン。

    画像
    神秘的を意識しました!


    美しく、静かで、どこか人を寄せつけない空間です。

    そこに異形が存在することで…
    ただ暗い場所に怪物を置くよりも、その存在だけが異質に見える👀✨

    そんな対比を狙いました。

    緊急クエスト風でもあります🤣🤣
    異常事態を狙う感じ!✨


    そして、このダンジョンが簡単な場所ではないことを
    一瞬で伝えるため、最下層を守る存在として
    巨大な黒竜を配置しました!💗

    画像
    金の装飾が素敵👀💗

    黒竜そのものを主役にしたかったわけではありません。

    「ここまで辿り着くこと自体が簡単ではない」

    それを説明ではなく、画面だけで感じてもらうための存在です。

    強大な黒竜がいる。
    さらに異形が登場する。

    この順番によって、BOSSの危険度を台詞で説明しなくても
    見せられると考えたんです( *´艸`)💓✨



    どの動画生成モデルを使うか

    素材が揃ったところで、Pollo AIを使った動画制作に入ります。

    ここで最初から「Wan 3.0」で全部作ろうと
    決めていたわけではありません( ̄▽ ̄;)💦

    「Seedance 2.5」や「MiniMax H3」なども実際に試しています。

    というのも、今回もっとも怖かったのが、

    セミリアルな世界観が途中で崩れること。

    実写のようになりすぎても違う。

    逆にアニメへ寄りすぎても、
    今回目指しているゲーム映像から離れてしまいます。


    キャラクターを維持できても、質感が違えば
    同じ作品には見えません(;´・ω・)

    物凄く頭を抱え、何度もやり直ししました😂
    いや!本当に初心者に戻った感じです( ̄▽ ̄;)💦

    実際に試してみると、Seedance 2.5は安定感がある一方…
    今回の異形のような、特殊なキャラクターを扱う場面では
    すごく苦戦しました💦

    MiniMax H3も試しましたが、異形さんはほとんど
    人物の質感がリアル方向へ寄りすぎる…。


    これはモデルの良し悪しではなく
    今回作りたい作品との相性のお話です。

    いくつか試した中で、私が求めていたセミリアルな
    ゲーム映像の質感と噛み合ったのが「Wan 3.0」でした。

    そこで途中から、

    Wan 3.0を映像制作の基盤にする

    と方向を固めました。

    AI動画では「一番新しいモデルだから使う」ではなく
    自分の作品の絵柄を守れるモデルを選ぶことも大切だと感じています。



    画像
    画像をクリック~💓

    クレジットがぁ~~(。>﹏<。)💦 って!!!
    そこのお悩みのあなた(*´Д`)💕

    Pollo AIさん、Xでコンテストを
    開催していることがあります🌸✨
    要チェックです(`・ω・´)ゞ💗
    (※先着早い者勝ちなので、チェックしましょう)

    コンテストに参加するためのクレジットも
    配布してくれることも( *´艸`)💓✨
    詳細はXでフォローして確認しましょう💓
    Xのリンクはこちらから👇💕📱
    Pollo AI Japan(@PolloAIJP)さん / X



    「動画」ではなく「ゲーム画面」として考える

    使用するモデルが決まったあと、次に意識したのが見せ方です。

    参加すると決めてから、頭の中に置いていたのは
    ずっとPS5のようなゲーム映像でした。
    (モンハンのOPなど、見せ方も参考に…)

    キャラクターを中央に置いて動かすだけでは
    ゲームのイベントムービーらしくなりません。

    動作そのものと同じくらい
    カメラワークとカットインを大切にしています🌸✨

    ◽聖騎士マリヤがダンジョンを歩く。
    ◽床すれすれから捉える。
    ◽視線の先に敵がいる。
    ◽剣を構える。
    ◽場面を切り替え、異形の存在を見せる。
    ◽そして戦闘へ。

    ひとつの長い映像をAIに任せるのではなく、

    「この数秒で、観ている人に何を感じてもらうのか」

    をカットごとに決めて生成していきました。

    迫力が必要なところでは距離を詰める。
    異形の恐ろしさを、見せたいところでは
    異形そのものを主役にする👑

    逆に、世界の広さを見せたいところでは
    キャラクターだけを大きく映さない。

    こうしてカメラの役割を変えていくと
    短いカットをつないだ時にも映像に緩急が生まれます🎥✨

    今回の制作では、プロンプトの内容だけではなく
    「どこから見せるか」も演出の一部でした(`・ω・´)ゞ



    異形は、AIにとって簡単なキャラクターではなかった

    今回、特に難しかったのが異形さん…(;´・ω・)

    画像

    人間のような身体を持っているのに、顔が存在しない。

    さらに首元から靄が揺れている。

    普通の人物とは構造そのものが違います。


    生成を重ねる中では、異形が思うように映らなかったり
    顔が勝手に生成されたりと…
    イラストに忠実すぎることもありました( ̄▽ ̄;)💦


    プロンプト公開ですヾ(o´∀`o)✨
    ご参考までに…

    【シーン】

    5秒。前のシーンで巨大な黒竜が謎の攻撃を受けた直後、その攻撃を行った「異形」を初めて明確に見せるBOSS登場シーン。

    この5秒間の主役は完全に異形。マリヤと黒竜は映さない。

    参照画像の異形をキャラクターデザインの絶対基準とし、身体比率、あぐらをかいた姿勢、身体に突き刺さった複数の剣、金色の傷、お面、首元から絶えず立ち上る黒と深紅の煙、配色、装飾、全体シルエットを維持する。

    異形は通常の成人と同程度の人間サイズ。巨大化させない。

    【映像表現】

    参照画像のキャラクター造形と幻想的な美しさを保ちながら、PS5世代のハイエンド・ダークファンタジーRPGのプリレンダーCGムービーをイメージしたセミリアル表現へ。

    実写や過剰なフォトリアル、2Dアニメ、セルルックにはせず、立体的な身体の厚み、自然な光、深い陰影、精密な素材感、金属反射、空間の奥行き、映画的な被写界深度を加える。

    黒い身体には繊細な凹凸、剣には上品な金属質感、金色の傷には立体的な亀裂と柔らかな内部光を持たせる。

    神殿の白い環境光と炎の暖かな光を自然に回り込ませ、最初から最後まで同じセミリアルCGの質感を維持する。

    【0〜0.8秒:あぐらのカットイン】

    白い大理石の床すれすれから、あぐらをかいて座る異形の下半身をクローズアップ。

    異形自身は動かさず、カメラだけをごく僅かに横へスライドさせる。

    【0.8〜1.7秒:身体に突き刺さった剣】

    鋭くカット。

    異形の胴体を斜めからクローズアップし、身体に突き刺さった複数の剣を明確に見せる。

    刃には厚み、鋭いエッジ、細かな傷、自然な金属反射を加える。

    異形は痛がらず、剣にも触れない。

    【1.7〜2.6秒:金色の傷】

    胸、肩、腕に刻まれた金色の亀裂状の傷をクローズアップ。

    平面的な模様ではなく、黒い身体へ刻まれた立体的な亀裂として表現する。

    亀裂の奥から上品な金色の光が静かに漏れ、カメラは傷に沿って僅かに移動する。

    【2.6〜3.6秒:お面と首元の煙】

    首元とお面を大きくクローズアップ。

    異形には普通の人間の頭部や顔は存在しない。

    首から上には黒と深紅の煙状の靄が常に存在し、静かに形を変えながら絶えず揺らめいている。

    これは途中で発生する特殊効果ではなく、異形そのものの身体的特徴。

    お面は最初から首から上の正面を覆い、片手はその縁へ静かに添えられている。

    【3.6〜5秒:BOSSの全体像】

    鋭くカットし、ここで初めて異形の全身を見せる。

    巨大な白い柱と大理石に囲まれた神聖な神殿。その広大な空間の中で、人間サイズの異形が静かにあぐらをかいている。

    身体には複数の剣。黒い身体を走る金色の亀裂。首から上には顔がなく、お面の周囲から黒と深紅の煙が絶えず揺らめく。

    異形自身は微動だにしない。

    カメラだけがゆっくり近づき、最後の約0.5秒でほぼ停止。

    白く神聖な巨大空間の中で、黒・深紅・金の異形だけを強烈なコントラストで浮かび上がらせる。

    身体は決して巨大ではない。

    それでも、**「この存在は危険だ」**と感じる静かな威圧感を持たせ、BOSS初登場の全身ショットで終了する。

    【音響】

    0〜0.8秒:重く短い「ズン……」というカットイン音。

    0.8〜1.7秒:剣を映す瞬間に、静かな金属共鳴音。

    1.7〜2.6秒:金色の傷に合わせて、非常に低い振動音。

    2.6〜3.6秒:黒と深紅の煙に合わせた低い流動音。

    3.6〜5秒:全体像への切り替えで重く深い衝撃音。その後は神殿の炎と巨大な石造空間の残響だけを残す。

    異形は完全に無言。

    BGM、音楽、台詞、ナレーションは入れない。

    実際に使用したプロンプト(公開用に一部整理)

    ※異形を初めてBOSSとして登場させる
    5秒間のシーンで使用した指示を
    読みやすいよう整理したものです。

    といった、絶対に崩したくない特徴を明確にしていきました。

    AIに全部を察してもらうのではなく
    作品にとって重要な情報ほど、こちらから優先順位を渡す。

    この調整を繰り返しています。



    音楽はTad、声はPollo AI

    映像が形になったら、次は「音」です。

    BOSS戦なので、音楽は作品の空気を大きく左右します。

    今回はTadで楽曲を制作しましたが
    テキスト読み上げには使用していません。

    キャラクターの声は、Pollo AI内にある
    テキスト読み上げ機能を使いました👇
    (※オーディオの下にあります)

    画像

    ここでも、一度決めた声をそのまま全編に当てたわけではありません。

    場面や台詞に合わせて声のニュアンスを変更しながら
    映像に合うものを探しています。

    画像

    同じ文章でも、声が変わればキャラクターの印象はかなり変わります。
    ピッチの変更も可能なので、高い声ならマイナスにして
    声を低くどっしりとした感じに出来ます!✨💗

    特に異形の場合、感情を乗せすぎると「人間らしく」なってしまう。

    逆に無機質すぎると、このBOSSが
    背負っているものまで薄くなってしまう。

    映像だけではなく、声でもその境界を探りました。

    台詞は「足す」より、最後に「引く」

    最初は、入れたい台詞がいくつもありました✨

    💭異形が何を考えているのか?
    💭なぜ攻撃するのか?
    💭何を理解できないのか?

    設定を作り込んでいるほど、どうしても喋らせたくなります。

    でも実際に映像へ入れてみると…
    全部を説明するほど世界観が狭くなっていきました💦

    そこで最後に行ったのが、台詞の引き算です。

    必要な台詞はいったん入れる。

    映像と合わせる。

    そして、なくても伝わるものを削る。

    言葉で説明するより、表情、間、音楽
    カメラで感じてもらえる部分は残さない∑d(d´∀`*)グッ!🌸

    今回の異形は特に、すべてを語らない方が
    不気味さも悲しさも残りました!ウン(-ω-)(-ω-)ウン

    伝えるために言葉を増やすのではなく、想像できる余白を残すために削る。

    これは完成直前まで調整した部分です。



    CapCutの編集で映像をひとつにする

    AIで各シーンを生成したら、最後はCapCutで編集しました。

    ここでは大きく作品を作り直すというより、生成した素材を
    ひとつの映像として成立させるための微調整を行っています💻

    カットのタイミング。

    音楽と映像が切り替わる位置。

    台詞を入れる間。

    字幕。

    数秒ずれるだけでも、攻撃の重さや緊張感は変わります。

    AIが作った映像を並べれば完成、ではありません。

    最後に人間側で「どこを見せて、どこで切るのか」を
    決めることで、ようやくバラバラだった生成素材が
    ひとつの作品になりました(*´ω`*)🎥✨


    作ってみて、一番感じたこと

    キャラクターシートを作り、フィールドを用意し
    Pollo AIで複数の動画生成モデルを試し
    Tadで音楽を作り、Pollo AIで声を加え、CapCutで仕上げる✨

    こうして書くと、たくさんのAIやツールを
    使った作品に見えるかもしれません。

    でも、私が一番大切だと感じたのは、ツールの数ではありません。

    「何を作りたいのかを、途中で見失わないこと」

    Seedance 2.5が悪いわけでも、MiniMax H3が悪いわけでもありません。

    今回の世界観には「Wan 3.0」が合った。

    だから選びました(-□д□-)✨

    台詞も、たくさん考えたから全部使うのではなく
    世界観を守るために削りました。

    カメラも、格好いい動きを生成することだけを目的にせず
    「ゲームとして見た時にどう感じるか」で決めました🎮


    AIは、こちらが選択肢を渡すほど
    色々なものを返してくれます(っ•ω•´)っ_/🔎✨

    だからこそ、最後に必要なのは
    「これは私の作品に必要なのか?」
    と、選び続けることなのかもしれません。

    一枚のイラストだった異形が、キャラクターシートになり

    神聖なダンジョンに立ち

    黒竜を越えた先で、聖騎士マリヤと対峙する…


    そして、実際に動き、声を持ち
    ひとつのBOSSとして画面の中に存在する。

    ずっと、頭の中にいたキャラクターが
    ゲームの中から出てきたように動いた瞬間…

    これは、作ってきた本人だからこそ
    余計に感じるものかもしれませんが
    「異形さん、本当にBOSSになったな…」と思いました✨


    試して、失敗して、モデルを変えて
    プロンプトを直して、また生成する。

    その繰り返しでしたが
    その試行錯誤まで含めて今回の作品です( ˶ˊᵕˋ)੭🌸✨

    もう一度どうぞ…👇💗


    Pollo AIのように複数の動画生成モデルを
    ひとつの場所から試せる環境だからこそ‼‼
    「このモデルで作らなければいけない」と決めつけず
    作品に合う表現を探すことができました(๑•̀ㅁ•́ฅ)✧


    AIに作品を決めてもらうのではなく、
    自分が作りたい世界のために、AIを選ぶ。

    今回の異形BOSS制作で、改めて感じたことです(*´ω`*)💓


    YouTubeでたくさん動画あげてるよ🎥
    登録よろしくね~~(=゚ω゚)ノ✨

    Pollo AI様の記事をマガジンで
    まとめたのでお時間ある時、他の記事もどうぞ!
    制作フロー紹介しております✨



    Pollo AI

    新モデルが続々とリリース‼‼✨

    画像
    画像

    Pollo AI様

    パソコンの方はこちらから( *´∀`)ノ 🌸
    👇クリック…ポチっ💻👇
    https://tinyurl.com/3rw5kt7m
    自分の可能性を広げよう✨

    YouTube

    Xのリンクはこちらから👇📱
    Pollo AI Japan(@PolloAIJP)さん / X


    最後まで見てくれてありがとう🌸

    私もまだまだ勉強中の身です✨
    皆様のお声をお聞かせください!💓✨

    画像

    #つづけたDay
    #3日間チャレンジ
    #生成AI
    #画像生成AI
    #動画生成AI
    #繊細さん
    #note毎日投稿
    #毎日投稿
    #振り返り
    #記事
    #AIイラスト
    #アート好きと繋がりたい
    #白銀の髪同盟
    #紹介
    #AIイラストアイラ
    #PolloAI
    #pollo
    #創作あそびUP系
    #アカリウム
    #白銀マリヤ

     
     
    ‪🫶HSP×INFP⇆INTP🍀👩‍🔬 AIと一緒に、好きなものを好きなように創作🎨 イラスト・映像・MV|AIツール検証&レビュー🎥 制作のことから日々思うことまで綴る✍️ 企業案件・PR記事・レビュー多数実績あり✨ ご依頼・ご相談・お問い合わせはDMまで📩 Xでも活動中です!📱

    あなたへのおすすめ