見出し画像

LTX2 プレイグラウンド向けMVメイキング動画用のAI動画生成管理支援アプリ

Google Flow Musicで生成した曲をAIリリックビデオとしてYouTubeショートに投稿しプレイリスト化しているMVのメイキング動画を制作するためのシングルHTMLアプリ(ローカル動作)をGeminiで開発中なので紹介します。

無料ダウンロード提供中です。ご自由にお使いください。(Gemini Canvasでカスタマイズが可能)

D'zGAL Story Studio v0.5.1 LTX2.3 Fast 版
AI(Gemini API)で自動生成されたLTX2.3 Fast用プロンプト

★ 現時点では、開始・終了フレーム画像を指定したLTX2.3 Fast用のシンプルな仕様ですが、今後は、Google Flowなどのキャラクターやシーン画像などを参照画像として使えるバージョンも開発予定です。

LTX2.3 Fastが使えるプレイグラウンドでの動画生成コストは、6秒 / 720p で$0.18ドル(約30円)と安く、生成時間も約35秒と高速です。

私の場合は、最初に$11を支払ってPersonalプランに加入すると、$21のチャージ($10分が追加で無料)がされました。この場合は、116回の動画生成が可能です。


無料ダウンロード

ダウンロード後、展開するとHTMLファイルが得られるので、それを適当なフォルダーにコピーし、ブラウザーのタブにドラッグ・アンド・ドロップしてお使いください。

★ ブックマーク(お気に入り)に登録すると、ブラウザーから簡単に開けます。

D'zGAL Story Studio v0.5.0の使い方

Gemini APIキーのコピー

APIキーをコピー
API設定ボタンをクリック > APIキーをペーストし保存する
API設定(済)

★ ローカルフォルダーを「作業フォルダー連携」に指定すると、使った画像をそこに自動保存できます。

AIによる自動プロンプト生成

カット一覧
カットの詳細編集画面

フレーム制御」で「演出・演技メモ(日本語)」にシーンの説明を記入し「AIでプロンプト&ローマ字セリフ最適化」をクリック。

★ 必要に応じて、FIRST FRAME / LAST FRAMEに画像をアップロードできますが、プロンプトの生成に直接は関係しません。LTX2.3 Fast プレイグラウンドに画像をアップロードします。

★ 必要に応じて「セリフ・歌詞&音素制御…」に日本語でセリフや歌詞を入力します。AIが自動的にローマ字分割セリフに変換し、最終プロンプトに反映します。

ローマ字分割セリフの方が、正しい発音をする確率が高いですが、イントネーションなどの表現には日本語(かな漢字)の方が適しているので、ケースバイケースで使い分けてください。

最終合成プロンプトを一括コピー

D'zGAL Story Studio v0.5.1 LTX2.3 Fast用
AI(Gemini API)生成されたプロンプト > 一括コピー

プロンプト例

AI生成されたプロンプトの一例が以下です。

masterpiece, realistic cinematic photo, 8k uhd, shallow depth of field, slim body, elegant posture. Medium shot of a young Japanese woman in a professional studio setting, soft natural indoor lighting, cinematic quality, bows apologetically while saying "Okurete", "Sumimasen deshita" in Japanese, apologetic, shy, tearful glistening eyes, blushing face, soft emotional lighting. The woman enters the studio by opening the door, performs a bow, and then looks up towards the camera with slightly tearful, shy eyes, camera stays fixed on her.

動画生成

LTX2.3 Fast プレイグラウンド

LTX プレイグラウンド > Image to Video

Image to Videoで動画生成

プレイグラウンドを開いて、FIRST FRAME / LAST FRAME に開始・終了フレーム画像をアップロードします。

LTX-2.3 Fast プレイグラウンド Input画面

PROMPT:最終合成プロンプト」を貼り付ける
MODEL: LTX-2.3 Fast(他はテストは未)
DURATION: 6 sec
RESOLUTION: 720p
FPS: 24 fps
GENERATE AUDIO: On
CAMERA MOTION: None

設定が済んだら「Generate」をクリック。

★ 私の場合は、約35秒で生成が完了しました。

作例

開始フレームと終了フレームは、すでに生成済みの動画から該当フレームを保存したものを流用しています。

開始フレーム

開始フレーム

終了フレーム

終了フレーム

動画

まとめ

Google Flow MusicGoogle FlowFlow Tools)とD'zGAL Music Webアプリで3分の動画を出力して制作したAIリリックビデオのメイキング動画制作用に開発中のシングルHTMLアプリを紹介しています。

以下は、連続再生/全画面表示用のリンクURLです。

当面は、AIリリックビデオと同じ9:16の縦長動画と共存させるつもりですが、将来的には16:9の横長動画にもチャレンジしたいと思います。

参考リンク


いいなと思ったら応援しよう!