メインコンテンツへスキップ
見出し画像

「Pixubus v2.8リリース:ComfyUI初心者でも、日本語だけでオリジナルキャラが作れるようになりました(エロも可)」

    Pixubus v2.8 ができました。

    画像

    目玉は「キャラクター生成」。次の大きな節目(v3.0)の中心にするつもりの機能を、ひと足先に入れました。

    今回はメンバーシップの方への先行リリースです(いつも支えてくださって、ありがとうございます)。メンバー以外の方にも、v2.8 で何が変わるのかはこの記事で全部分かるように書いています。正式リリースの予告編として読んでもらえたらうれしいです。

    Pixubus とは

    はじめての方向けに、ざっくり紹介します。

    Pixubus は、キャラクター画像から画像生成用のタグ(プロンプト)を作る、ローカル動作の Web アプリです。

    使い方は3ステップ。まず、好きなキャラ画像をアップすると、ローカル LLM (Ollama)が外見を読み取って英語のタグに起こします。髪型も服も、自分でタグを調べる必要はありません。

    画像
    ①キャラクター抽出:画像をアップ → 外見タグに

    次に「放課後の図書室、本棚の前で穏やかに微笑む」のような日本語のシチュエーションを足すと、画像生成用のプロンプトが完成。ComfyUI をつないでいれば、そのままボタンひとつでイラストになります。

    画像
    ②シチュエーション入力 → プロンプト完成 → ③図書室のイラストに)

    プロンプトを考える作業は LLM に任せて、人間は「誰が、どんな場面か」だけ決める。そういう道具です。

    ぜんぶ手元の PC で動くので、生成の中身を外部サービスに握られることもありません。詳しくは使い方サイトにまとまっています。

    きっかけは快活クラブでした

    キャラクター生成を作ろうと思ったきっかけは、快活クラブでの Pixubus 検証です。

    前回、快活クラブで ComfyUI はできるのか、という記事を上げました。

    そこで Pixubus も検証したのですが、使ったのは、私があらかじめ Google AI Studio の Nanobanana で作っておいた婦警さんの画像でした。

    で、ふと思ったんです。「あれ、そもそもキャラクター画像を持ってない人はどうするんだろう」と。

    もちろん Pixubus のコンセプトは「キャラクターからタグを生成する」なので、好きなアニメの美少女キャラクターをタグ化する使い方もできます。ただもう一方で、自分が作ったキャラクターを使いたい人もいるはずです。

    アニメのキャラクターを使うにせよ、作るにせよ、ネットカフェの限られた時間、時間課金の中では、探す手間を省きたい。

    そう思って、Pixubus にキャラクター生成機能を作りました。なので今回のテーマは「快活CLUB駆動開発」です😉

    元になるキャラ画像、もう探さなくてよくなりました

    v2.8 では、日本語の設定を選ぶだけでオリジナルキャラクターを作れます。

    これまでの「キャラ画像をアップ」に加えて、キャラの入口が2つになったイメージです。

    画像
    キャラの入口は2つ

    キャラクター(女子高生・幼馴染・お嬢様・姫騎士…)、年齢、体型、衣装。この4つを選んで生成ボタンを押すと、ローカルの LLM がキャラクターをデザインして、画像生成用の外見タグに起こします。

    髪や目の色、性格まで指定もできますが、指定しなかったところは LLM がキャラクターに合わせて埋めてくれます。ここが手作業のタグ打ちとの違いで、けっこう楽しいところ。

    画像
    キャラ作成画面:主要4項目のフォーム

    ComfyUI をつないでいれば、その場で立ち絵のプレビューまで出ます。気に入らなければ何度でも作り直し。気に入ったら保存して、緑のボタンでそのままイラスト生成へ。

    たとえばこの子。キャラクター生成で作ったくノ一です。

    画像
    キャラクター生成で作ったくノ一の完成図

    好みのキャラクターができたら従来のPixubusの機能で日本語でシチュエーションを指定すればOllamaが画像生成のタグにしてくれます。
    あとはComfyUIに接続して画像生成するだけです。(もしくはComfyUIにコピペ)

    今回のブログのサムネイルのイラストもPixubusでつくりました。

    画像
    画像


    流れは1分の動画にまとめたので、これを見てもらうのが早いです。


    ComfyUI 初心者でも大丈夫です

    ComfyUI のワークフローはいじりません。設定画面でつなぎ先を入れたら、あとは生成ボタンを押すだけです。

    それと、ComfyUI がなくても使えます。キャラクター生成はタグ(プロンプト)を作るところまでが本体なので、できたタグをコピーして手持ちの環境で使う、でも成立します。

    で、エロも可能です。ぜんぶローカルで動くので、外部 API の規約に縛られません。どこまで行けるかはお使いのモデル次第ですが、この記事に実物は載せません(笑)。

    衣装は 10テーマ・55着になりました

    アニメ・ソシャゲ・同人のトレンドを調べ直して、衣装を大きく増やしました。

    アイドル衣装、サキュバス、浴衣、サンタ、ウェディングドレス、軍服、レオタード。学生制服だけで12種類あります。

    キャラクター(誰か)と衣装(何を着るか)は別の項目です。なので「女子高生に OL スーツ」「お嬢様にメイド服」みたいなコスプレの組み合わせが自由に組めます。

    画像
    衣装ワードローブを開いた画面

    数が多いのですべてデバックはしきれてません😣

    迷ったらガチャ

    「おまかせガチャ」で、キャラクターも衣装も髪も目も全部ランダムに決めて回せます。

    引いた瞬間に、変わった項目のエリアが光ります。どこが変わったか見えるので、ガチャ → 気に入ったところだけ直す → 生成、という遊び方がしやすくなりました。

    プルダウンが面倒なら「自由記述モード」も付けました。「28歳の書店員。眼鏡でおっとり」のような文章だけでキャラを作れます。

    作ったものは全部残ります

    生成した外見タグも立ち絵も、すべて自動でキャラ生成履歴に残ります。「あのとき出たあの子、良かったな」を後から拾い直して、設定ごと読み込んで作り直せます。

    良かったプロンプトには ★、立ち絵には ♥。「★ お気に入りのみ」で絞り込めます。

    画像
    キャラ生成履歴の画面

    元絵の「持ち物」と「ポーズ」を外せるようになりました

    キャラクター抽出に「持ち物を無視」「ポーズを再現しない」のスイッチを付けました。地味に見えて、今回わりと気に入っている改善です。

    これも快活クラブが起点です。前回の記事で婦警さんの画像を題材にイラストを作ったのですが、この子、手に拳銃を持っていたんです。

    画像
    元キャラ:拳銃を持った婦警さん

    抽出タグに拳銃が入るので、何を作っても銃を構えた構図に引っ張られる。イラストのパターンが限られてしまいました。

    画像
    前回の生成画像:銃を構えた構図

    v2.8 では、抽出のときに「持ち物を無視」を入れると武器や小物のタグが外れます。「ポーズを再現しない」を入れると、元絵の姿勢に引っ張られないキャラ設定になります。

    画像
    画像

    同じ婦警さんから、持ち物なしで別のポーズを作ってみたのがこれ。衣装はそのままです。

    画像
    画像

    従来のイラスト生成側も強化しています

    キャラクター生成だけではなく、従来フローにも手を入れました。ざっと並べます。

    • 抽出の読み比べ:同じ画像を別のモデルで抽出し直して、タグの違いを色分けで見比べられます。「12B と 31B、どっちが正確に読めてる?」がひと目で分かります

    • 履歴の「詳細」ボタン:プロンプト全文をその場で読んでコピーできます(スマホでも)

    • 画面切り替えを左のサイドメニューに整理。折りたたんで作業画面を広く使えます

    • ジョブ画面にベンチマーク:モデル別・GPU 環境別の速度を順位付きのグラフで見られます。画像として保存もできるので、環境選びの記録に

    • バックアップの 4GB 上限を撤廃。生成画像が数 GB たまっていても npm run backup がそのまま通ります


    画像
    サイドメニューとベンチーマーク


    画像

    変更履歴


    v3.0 に向けて テーマは「短期決戦⚔️」

    冒頭にも書いたとおり、キャラクター生成は v3.0 の中心に据えるつもりです。

    それと、快活クラブで感じた「限られた時間で、狙ったイラストまでたどり着く」という感覚。この短期決戦の考え方は、v3.0 とその先まで引っ張っていくつもりです。

    今回の v2.8 はその入口。まずは土台の形でメンバーの方に先に触ってもらって、ここから磨いていきます。

    v3.0 は、従来どおり買い切りの記事として出す予定です。中身や時期はまだ固まっていないので、確定したらまたお知らせします。リリースをお楽しみに。

    メンバーシップのご案内

    v2.8 の zip は、この記事の最後(メンバーシップ限定部分)に添付しています。

    先行リリースなので、まずはメンバーシップの特典としての配布です。メンバーになると、

    • Pixubus 本体の販売記事など、メンバー特典対象の有料記事が個別購入なしで読めます(zip もそこから入手できます)

    • 今回のような新バージョンの先行配布を受け取れます

    単品の買い切りも用意していますが、アップデートを追いかけながら使いたい方にはメンバーシップのほうが向いています。

    よかったら覗いてみてください。


    感想や「こういう衣装・キャラ項目がほしい」があれば、コメントや掲示板で教えてもらえるとうれしいです。次の改善のネタにします。

    入手方法(メンバー先行)

    ここから先はメンバーの方向けです。この下に v2.8 の zip を添付しています。

     
     
    ローカルLLMで小説・イラスト・動画を作りたい人に、ツールと作り方を届けます。"オタクとしての創作AI活用"が中心。小説のInkubus、イラストのPixubus、動画のVidubusは自作。OllamaとComfyUIは自宅のGPUで実機検証。メンバーシップは200人を突破。

    あなたへのおすすめ