メインコンテンツへスキップ
見出し画像

Jevで小説に手描き風の動く挿絵つけてくれるサイト作ったよ


    手描き挿絵文庫を作りました


    小説を読み進めると、いま読んでいる場面が、動く手描き風の挿絵になって出てくるサイトです。

    PC、スマホ対応。

    紹介動画です


    11月30日までの期間限定で、どなたでも無料で試せます。APIキーは要りません。


    画像
    実際の画面とは異なります。ショート動画をご覧ください。
    画像
    1コマ目の不自然な箇所はGPTworkが自動修正してくれたやつの消し忘れだけど、ざっくり漫画だからこのままで⋯⋯Kindleなら直すけど
    画像
    画像
    画像



    どんなサイトか

    この時のサイトの別バージョン+強化版です。


    手持ちの小説のファイルや、青空文庫の作品を開いて、ふつうにスクロールして読むだけです。読む手を止めると、その場面を読み取って、場所・時間帯・登場人物・気持ちに合わせた挿絵を描きます。


    挿絵はずっと止まっているわけではありません。線が手描きアニメのようにかすかに震え、人物はまばたきをしたり、歩いたり、手を振ったりします。代表的なセリフは吹き出しになって、話している人の頭の横に出ます。


    読み取っているもの


    本文から、たとえば次のようなことを読み取って描き分けます。


    ・場所:和室、洋室、教室、駅、街路、森、海辺、寺や神社、教会、城、病院、墓地、洞窟、雪山など、28か所

    ・時間帯と天気:朝・昼・夕方・夜、雨・雪・霧・曇り

    ・登場人物:大人・子ども・お年寄りの男女、中年の男女、赤ちゃん、兵士や騎士、お坊さんや神父、おばけなど

    ・動作:立つ、座る、歩く、走る、しゃがむ、手を振る、泣く、抱き合う、剣を振る、拳を突き出すなど

    ・気持ち:喜び、悲しみ、不安、怒り、驚き、落ち着き

    ・動物:犬、猫、鳥、馬、うさぎ、ドラゴン、正体の分からない影


    作品の時代も読み取ります。近代の日本なら着物や学生服、現代ならシャツやワンピース、西洋風ならコートやドレス、ファンタジーならマントや鎧、というように、時代によって服装や町並みが変わります。ファンタジーの作品に駅が出てきたり、明治の作品に城の広間が出てきたりしないように、使う場所も時代で絞っています。


    心の中だけを描いた段落では、背景がその気持ちの色に変わります。不安なら揺れる渦、喜びなら光、驚きなら集中線、という具合です。


    顔について


    登場人物の顔は、私が紙に描いた大人と子どもの顔をもとにClaudeに描いてもらいました。もはや、どこから先が画像生成なのか分からないですね(?)


    読み方


    1. サイトを開いて、「本を開く」からファイルを選びます。テキスト(.txt)、Markdown(.md)、青空文庫の zip が読めます。文字コードは自動で見分けます。

    2. 青空文庫の作品なら、図書カードの URL を貼るだけでも読めます。

    3. 手元に作品がなくても、「試しに読む」に短い作品をいくつか用意しています。剣と魔物のファンタジー「洞窟の影」や、お寺の猫とおばけの話「お寺の猫」など、いろいろな挿絵が出るようにClaudeが書き下ろしました。


    あとはスクロールして読むだけです。読むのを止めたところで、挿絵が切り替わります。


    表示の切り替え


    最初は「絵と文を分けて読む」表示になっています。スマホを縦に持つと上に絵・下に本文、横向きやパソコンでは左に絵・右に本文が並びます。


    設定から「絵を背景にする」に切り替えると、絵が画面いっぱいに広がり、本文はその上に半透明の帯で重なります。


    挿絵が気になって読みにくいときは、右下の「演出」ボタンで止められます。文字の大きさも設定で変えられます。


    公開期間と回数について


    11月30日(日本時間の23時59分)まで、どなたでも本物の判定で読めます。読み取りにはJevを使っているため、ユーザー全員の合計で1日2000回までにしています。


    上限に届いた日や期間が終わったあとは、本文の言葉から場面を推測する簡易的な判定に切り替わり、画面でお知らせします。翌日になれば、また本物の判定で読めます。


    一冊読むと、だいたい数十回から百回くらいの判定を使います。


    送られる文章について


    場面を読み取るために、読んでいるあたりの本文を数百字ずつ判定サービスに送っています。作品を開いたときは、冒頭のおよそ3000字も送ります。開いたファイルそのものや読みかけの位置は、お使いのブラウザの中にだけ保存されます。


    使わせてもらったもの


    手描き風の線を描く仕組み(線の震えやハッチング)は、Afaq Rashid さんが MIT ライセンスで公開している claude-animation-studio の描画エンジンをもとにしています。



    このサイトのコードも MIT ライセンスで公開しています。



    全自動リアルタイム漫画の完成にちょっと近づきましたね☺️また気が向いたら開発を進めます。



    宣伝

    少しずつ読んでくださった方が増えています✨️
    このお話が刺さる方に届いてほしいです。

    下巻は鋭意制作中です!





    Museのコードです。

    コメントもすごく嬉しいけどこっそりでもかなり嬉しいです。一見さんでも大丈夫です。

    I9OZ4Z


    画像

    記事が紹介されました!


    前回の記事が「ChatGPTのヨシダ」で存在感を放つカワムーちゃんのnoteで紹介されました✨️Muse記事のきっかけになれて嬉しいです。

    Museは本当にインパクトある新人で、私も毎日使ってます。


    共同運営マガジン参加中です😃



    マガジン追加ありがとうございます!

    画像
    Claudeが今回の画像づくりの仕組みで描いてくれたGIFアニメ





    余談

    今回の説明のAI漫画は私が使ってるなかで一番複雑なツールの仕組みで作りました。AIお任せ演出です。『異世界から帰還したら俺の活躍がゲームになっていた』の下巻の制作でも使用しています。
    なぜそのツールを販売できないのか⋯⋯?できないです。

    この記事が参加している募集

    あなたへのおすすめ