メインコンテンツへスキップ
見出し画像

【創作系日記】ComfyUIで、ハマる……。

     まあ、Astraが使えないなら、Bionicを使えばいいじゃない問題、結局、Bionicで直接、生成させるのは諦めまして――昨日の夜に単にComfy CLIでワークフローを自動実行するpythonスクリプトをChat GPTに作ってもらいました。……色々修正の上、一応、動いたんですが、LTX-2.5は、顔の潰れが酷く↓、残念ながらひらがなで発声指示しても、上手くいかないことも多く、

    画像
    キャプチャ画面です!

     ……ちょっと使えないので、調整必要なので、ちょっとボツ――やっぱMiniMax H3でF2Fで作ろうな~と、考えているところです。理想は、課金せずに2~3回ポチっと押したら、my小説をすぐアニメ化できる感じなんですが、もうちょい凄いローカルLLMが別PCで動かせないと難しい感じですね。

     しかし、MiniMax H3のF2Fで5秒ずつとか作ると、つなぎ目が目立つという問題があります。そこで、最終フレームを参照して次を作るようなワークフローも試してみました……みたのですが、ちょっとmy環境では重すぎて、いただけない感じで……それもボツという感じです。
     あと、現在、HR-Endress-Samplerというのも試しているんですが、これもメモリ不足で落ちるという……。うーん。中々、ComfyUIは難しいです。
     そんな試行錯誤をしているうちに、一日終わってしまいました……。

     うーん、単に趣味として動画を作っているだけなんですが、まあ、また時間あるときに、ちょこちょこ試してみたいと思います。


    (追記)
     こちらは、MiniMax H3 DirectorのワークフローをChatGPTでプロンプトを入れ込んで修正してもらったものを使って、『シュレーディンガーのゴキブリ』を半自動化して作ったものです。以前の、Codexで半自動アニメ化したものは、こちらになります↓

    MiniMax H3 Directorは、一度に30秒とかはVRAMの関係で無理でして、結局、10秒ずつシーン毎に作成した感じです(BGMは、別に埋め込み)。ちょっと楽になりましたが、画像を指定した通りに使ってくれる訳ではなさそうなので、もうちょっと工夫が必要そうです。


     ――というか、本日は、自前のコンテスト用の小説に注力するつもりだったんですが、なかなかそっちの方は手つかずです。
     まあ、とりあえず、小説の方は、全体を直してから、更に推敲して、賞に合う売りが全面に出るようにしようかな~と思っているんですが。余分そうなところを、直しながらバッサリ削っているところですね。今月締め切りのミステリーとホラーの賞にも出そうと思ったんですが、まさにこちらに書いたみたいなのと同じ問題があって、謎村節が強すぎるので、プロットから作り直しかなあ……と(苦笑)。
     それでは、また!


    この記事が参加している募集

     
     
    知財専門家です。 興味あるもの:PC自作、ソフトウェア関係、SF AIも使って小説を、なろうでも書いてます。同時掲載あり https://mypage.syosetu.com/290752/

    あなたへのおすすめ