メインコンテンツへスキップ
見出し画像

AI画像、整理して指示したのにまだ崩れる。まず「どこが崩れたか」を分けてみた

    「1か所だけ直したのに、別の場所が変わった」

    「頼んでいない飾りが、付いている」

    「前面だけの飾りが、背中にも出ている」

    AIで、キャラクターに服を着せ替えて、こんな経験はありませんか。

    わたしはあります。

    前の記事(有料)


    では、「生成する前に、何を残して、何を変えるか」を整理して、同じ条件で整理前と整理後を比べました。

    整理後には、見られなくなった崩れがありました。

    それでも、細部の崩れは残りました。

    では、もっと細かく書けば、直るのでしょうか。

    この記事では、その問いに入る前に、ひとつだけやってみたことを書きます。

    崩れを、「どこが、どんなふうに崩れたか」で分けてみた、という話です。

    ここで書くのは、直し方ではありません。

    読み終えたとき、「自分の崩れは、このあたりだ」と言える。そこまでを目指します。

    整理しても、崩れは残った

    前の記事の検証を、ごく短く振り返ります。

    同じキャラクターと、同じ衣装で、同じ場面の画像を、4枚ずつ生成しました。

    なお、この記事では、「このキャラ・この衣装」の見本として渡した画像を「基準画像」、それとは別に「ここを参考に」と添えた画像を「参考画像」と呼びます。

    一度目は、ほぼ何も整理せずに。二度目は、「何を残すか、何を変えるか、何を入れないか」を先に整理してから。

    ここでいう「整理」は、生成する前に、残したい所・変えてよい所・入れない物を、文章で書き分けておくことです。

    1セットだけの観察です。判定は、わたしが整理前と整理後の画像を実際に見比べて、指定した箇所以外に変化がないかを確認したものです。第三者の評価ではありません。

    整理前の4枚には、前面だけのはずの飾りが背中に出たり、背中の蝶結びが紫に変わったりする崩れがありました。

    整理後の4枚では、そうした崩れは見られませんでした。

    一方、腰のあたりの帯のような部分や、裾の重なり、髪飾り・ピアス・ブーツの細部には、基準画像との差が残りました。

    かなり細かく整理したつもりだったので、それでも違うところが出るんだ、と少し驚きました。

    ここで、次の問いが出てきます。

    「指示がまだ足りないのかな。もっと細かく書けば、直るのかな」

    足す前に、確かめたいことがありました。

    そもそも、何がどう崩れているのか。

    それがぼんやりしたままでは、何を足せばいいのかも決められないからです。

    崩れを、4つに分けてみた

    読者の方からいただく相談と、自分の画像を並べて見ていくと、崩れ方に似た形があることに気づきました。

    今回は、それを4つに整理してみました。

    先に断っておくと、「崩れは4種類ある」と言いたいわけではありません。

    今回見られた事例と、相談で多かった症状を、わたしが分かりやすいように整理しただけです。

    ほかにも種類はあるかもしれませんし、境目がはっきりしない崩れもあります。

    • ① 波及型|1か所を直したら、別の場所が変わった

    • ② 持ち込み型|頼んでいない物が、付いている

    • ③ 参照の取り違え型|別の画像にあった要素が、混ざった

    • ④ 位置の混線型|前と後ろ、右と左などが混ざった

    次の章から、1つずつ見ていきます。

    各タイプは、「どんな症状か」「見分けるサイン」の順に書きます。

    ① 波及型:1か所を直したら、別の場所が変わった

    どんな症状か

    直したいところは、1か所だけ。

    それなのに、直したあとの画像を見ると、直していないところまで変わっています。

    読者の方からの相談で、多かった症状のひとつです。

    たとえば(イメージです)、髪飾りだけ直したのに服の形が変わる、背景の色だけ変えたのに顔の雰囲気まで変わる、といった形です。

    見分けるサイン

    直す前と直したあとの画像を、並べて比べてみます。

    直したかった場所以外にも、差が見つかったら、このタイプです。

    「何が変わってしまったか」を言葉にできないと、次の指示で「それは変えないで」と書けません。

    (簡単な図)
    直したい場所 [髪飾り] → 直った
           [服の形] → 変わった(意図していない)
           [顔の雰囲気] → 少し変わった(意図していない)

    ② 持ち込み型:頼んでいない物が、付いている

    どんな症状か

    指示のどこにも書いていない物が、画像に出てきます。

    アクセサリーが、いちばん多いと感じています。

    読者の方からの相談でも、こんな形が多く聞かれました。

    ・指定していない首飾りが付いている

    ・衣装に飾りは無いはずなのに、小物が足されている

    ・以前の画像にあった飾りが、また出てくる

    見分けるサイン

    指示の文を、もう一度上から読みます。

    画像にあるのに、指示にも、基準画像にも、参考画像にも見当たらない物があったら、このタイプかもしれません。

    「基準画像にも、衣装にも、指示にも、無い」物なら、持ち込みと言えそうです。

    ただし、基準画像のどこかにある飾りが、別の面や別の場所に出ているだけの場合は、次の④かもしれません。

    分けて考えるのが難しいことも、正直あります。

    ③ 参照の取り違え型:別の画像にあった要素が、混ざった

    どんな症状か

    複数の画像を参考として渡したとき、渡した画像のうち、使ってほしくない側の要素が出てきます。

    読者の方の相談では、こんな形でした。

    ・コラージュ画像の中の、別の要素が出てきた

    ・参考にしたいのは1か所なのに、その周りの要素まで入ってきた

    起きやすい場面:衣装の参考を、コラージュのように、1枚に複数の要素が並ぶ形で渡したとき。

    見分けるサイン

    出てきた飾りや形を、渡した画像と照らし合わせます。

    その要素が、参考として渡した別の画像(または画像の別の一部)にあったら、このタイプです。

    ①と違うのは、「何かが変わった」ではなく、「別のところから来た」点です。

    ②と違うのは、「どこにも無かった」ではなく、「どこかの画像にはあった」点です。

    (簡単な図)
    参考画像A[衣装] 参考画像B[別の飾り]
          ↓
      生成した画像:衣装 + Bの飾り(意図していない)

    ④ 位置の混線型:前と後ろ、右と左が混ざった

    どんな症状か

    その衣装や飾りが、「どこにあるか」が混ざります。

    前面だけのはずの飾りが背中に出たり、背中の物が前に出たり。

    これは、前の記事の検証で、実際に見られました。

    この記事で実画像を出すのは、このタイプだけです。

    実例:前面だけの飾りが、背中に出た

    条件はこうでした。

    ・ChatGPTの画像生成(画像参照と自然言語の指示だけ)

    ・人物:わたしのキャラクター「アイリス」のキャラクターシート

    ・衣装:黒レースのハイネックの、黒い長袖ワンピース(前面だけ:紫の細いリボンと銀の月のチャーム/背面だけ:黒い編み上げと、下端の黒い蝶結び)

    この衣装を、斜め後ろ向きで描いてもらいました。

    前の記事の「整理前」の4枚から、崩れが見えた3か所を拡大したのが、次の画像です。

    画像
    整理前・拡大(前の記事の4枚から)。左から、整理前1|背中の上/整理前3|靴/整理前4|背中の蝶結び

    見るところ:左は、背中の上に紫のリボンと月のチャームがないか。中央は、靴に飾りが付いていないか。右は、背中の蝶結びが黒ではなく紫になっていないか。

    前にしかないはずの飾りが背中に出ているのを見て、「そこに移動するの?」が最初の感想でした。

    整理前の4枚で、見られたことです。

    ・1枚目:前面だけのはずの紫のリボンと月のチャームが、背中の上のほうに出た

    ・3枚目:靴に、紫のリボンと月のチャーム、レースのような飾りが付いた

    ・4枚目:背中の蝶結びと垂れた紐が、黒ではなく紫に変わった

    1セットだけの観察で、判定はわたしが画像を見比べて確認したものです。

    整理後の4枚では、こうした崩れは見られませんでした。ただし、この記事の画像は整理前です。

    見分けるサイン

    出てきた飾りが、基準画像の「別の面」や「別の場所」にあったら、このタイプです。

    前面にしか無い飾りが背面に、背面にしかない色が別の色に、というように、場所や面の情報が混ざったと見えるとき。

    なお、靴の飾りは、「持ち込み」(②)とも「位置の混線」(④)とも読めます。

    前面の飾りが別の場所に出たように見えるので、わたしは④に入れましたが、人によって分け方が変わるかもしれません。

    分類は、この程度のあいまいさを持った、整理のための道具です。

    自分の崩れを見分ける3つの問い

    ここまでを、問いにしてみます。

    手元の崩れた画像を見ながら、上から順に答えてみてください。

    問い1:直したかった場所以外も、変わっていますか?

    → はい:① 波及型

    問い2:指示にも、基準画像にも、参考画像にも無い物が、付いていますか?

    → はい:② 持ち込み型

    問い3:出てきた物は、別の画像のどこかにありましたか?

    → はい:別の画像から来ていれば ③ 参照の取り違え型/同じ衣装の別の面から来ていれば ④ 位置の混線型

    複数に当てはまってもかまいません。

    たとえば、1か所を直したら別の面の飾りが動いた、なら、①と④の両方です。

    当てはまるタイプが分かると、何が起きているのかを、人に説明しやすくなります。

    次の章では、「なぜ起きるのか」を考えます。ただし、ここからは仮説です。

    なぜ起きるのか:まだ確かめていない、3つの仮説

    ここから書くことは、どれも、まだ検証していない仮説です。

    「こうかもしれない」の範囲で、読んでください。

    仮説1:参考画像の役割が、競合しているのかもしれない

    衣装用の画像、人物用の画像、構図用の画像。

    人間は、「これは衣装の参考、これは顔の参考」と使い分けます。

    でもAIには、画像それぞれの役割が、そのとおりには伝わっていないのかもしれません。

    (③、②の症状と、つながりそうです。)

    仮説2:「残す」と「変える」が、同じ文の中に入っているのかもしれない

    「衣装は残して、髪型だけ変えて」のような1文は、人間には自然です。

    でも、「残す」と「変える」が近くにあると、境目があいまいになるのかもしれません。

    (①、④の症状と、つながりそうです。)

    仮説3:1か所を直す依頼でも、画像全体が作り直されているのかもしれない

    「ここだけ」と頼んでも、画像全体を一から生成し直していて、似ているだけの別の画像になっている可能性があります。

    (①の症状と、つながりそうです。)

    • 1 参考画像の役割が競合する|② ③

    • 2 残すと変えるが同居する|① ④

    • 3 修正でも画像全体が作り直される|①

    この3つは、確かめていません。

    「そうかもしれない」と見ておくだけで、次に何を試すかを考える材料になる、という位置づけです。

    前の記事の検証でも、整理後は指示の量や表情の指定も一緒に変わっていて、どの変更が効いたのかは分けられていません。今回の仮説も、同じ程度の確かさです。

    指示を足し続けても、直らないことがある

    ここまでで、言えることと、言えないことを分けておきます。

    言えること

    ・整理して指示しても、細部の崩れが残ることがあった(1セット・各4枚の観察)

    ・崩れは、「どこが、どんなふうに」で分けると、説明しやすくなった(わたしの整理)

    言えないこと

    ・崩れが、ちょうど4種類であること

    ・原因が、上の3つの仮説であること

    ・長く書くのが悪いこと(細かく書くことが役に立つ場面も、あると思います)

    ・この分け方で、崩れを防げること

    足すほど「参照するもの」や「条件」が増えて、かえって競合が増える可能性もあります。これも仮説です。

    大事なのは、足すこと自体より、「何が崩れているのか」が分かってから足すほうが、迷いが少なくなりそうだ、ということです。

    次の壁:見分けたあと、どこから直す?

    ここまでで、「自分の崩れは、どのタイプか」は、言えるようになったと思います。

    でも、見分けたあとに、次の問いが出てきます。

    ・複数のタイプが重なっているとき、どこから直せばいいのか

    ・1か所だけ直すには、どう頼めばいいのか

    ・直したあとに、指定していない所が変わっていないか、どう確かめるのか

    次に確かめたいのは、腰まわりと裾です。大きくは合っているのに、細かく見ると基準画像とはまだ違っています。

    これは、この記事では、答えが出せていません。

    修正に進むときの確認手順は、第2部で紹介しています。

    おわりに

    今回お伝えしたかったのは、次のことです。

    整理して指示しても、崩れはまだ残る。

    でも、崩れを「どこが、どんなふうに」で分けてみると、自分の画像の何が起きているのかが見えやすくなる。

    崩れた画像を見て、「また失敗した」で終わらせない。

    まず、どのタイプかを言葉にしてみる。

    この分け方が、すべての崩れに当てはまるとは思っていません。

    使いながら、当てはまらない崩れが見つかったら、また整理し直していくつもりです。

    では、見分けたあと、どこから直す?

    第2部では、生成前後のチェックシート、AIへの依頼文の型、次にどこを直すかを判断する手順をまとめています。見分けたあと、修正をどう進めるか迷っている方へ。

    ▶︎ 第2部(有料):【別の所まで変わる人へ】AI画像の局所修正チェックシートと管理フロー収録


     
     
    AIイラストと物語をつくるアイリスです。キャラクターらしさを大切に、思い描いた情景を形にするまでの試行錯誤を、作例やAIに伝えた指示とともに紹介しています。うまくいったことも、つまずいたことも。「自分も作ってみたい」と思えるきっかけになればうれしいです。

    あなたへのおすすめ