メインコンテンツへスキップ
見出し画像

Claude Opus 5.5とBlender MCPで、湖に浮かぶ街をモデリングする方法

    ※本記事の解説部分は無料で読めます。記事の最後にメンバーシップ限定で、今回の制作で使ったハーネス(サブエージェント5つの設定ファイルと、CLAUDE.mdの3Dモデリングに関わる部分)を配布しています。

    はじめに

     AIに3Dモデルを作ってもらおうとして、イメージと全然違うヘンテコな呪物が出てきた経験がある方もいるのではないでしょうか。

     プロンプトを長くして細かく指示しても、建物の形がおかしかったり、色が違ったり、途中で作業が止まってしまったりします。何を直せばよいのか分からないまま、指示を書き直し続けることになるかもしれません。

     そこで今回は、私が実際にAIを用いて3Dモデリングした実例をご紹介します。

     制作したのは、湖の真ん中に浮かぶ水路の都「ルメリア」です。運河が509本、橋が1,199本、建物が8,662棟ある街です。

     私は、Blenderを一度も触っていません。使ったのは、Claude Code(モデルはOpus 5.5)と、Blender公式のBlender MCPです。Blender公式のBlender MCPの導入方法は、また別の機会に解説します。

    画像
    完成した水都ルメリアの俯瞰

     本記事では、このときに人間が何を用意して、どのように修正を指示したかを紹介します。同じ内容は、YouTubeの動画でも解説しています。

     なお、Claude Codeとは、Anthropic製のAIコーディングツールです。目標を指示すると、ファイルの作成や編集をAIエージェントが自動で実行します。Blender MCPは、Claude CodeからBlenderを操作するための仕組みです。これを入れると、Claude CodeがBlenderの中で形を作ったり、色を付けたり、撮影したりできるようになります。

    全体の流れ

     全体の流れは、次のとおりです。

    1. 見本を渡す

    2. ハーネスを用意しておく

    3. 設計書を書き、街を組み立てる

    4. 途中の結果を見て、直してほしい所を伝える

    5. 組み立てる様子を録画する

    6. 直したことを次に残す

    画像
    人間とAIの役割分担

     設定文を渡してから録画できる状態になるまでには、ほぼ1日かかりました。そのうち私が手を動かしたのは、見本を用意する所と、途中で結果を見て伝える所、それに録画だけです。

    見本を2つ渡そう

     最初にやることは、見本となるデータの作成です。

     1つ目は、イメージ画像3枚です。2つ目は、街の設定を書いた文章です。

     イメージ画像は、その設定文から、GPT Image 2.5で作りました。

     設定文は、ChatGPTに次の1文で頼んで作り、一部を直したものです。

    ファンタジーな世界の水路が張り巡らされた観光都市の設定を作成して。建物の外観などのビジュアルの設定を詳細にしてください。

     「陸側と水路側で建物の顔が違う」といった細かい見た目は、ChatGPTが設定文に書いたものです。AIは、これをもとに建物を作り分けていました。

    画像
    見た目の見本(イメージ画像3枚と設定文を作ったときのプロンプト)

     また、前に作った「斑鳩銀座商店街」の作り方も参照させています(※まだ公開はしていません)。AIは、その商店街と同じ段取りで作業を進めていました。

     前の作品の作り方を参照させると、フォルダの構成や、設計書の書き方、録画の進め方を、一から決め直さずに済みます。

     見本を作るときには、注意したいことがあります。他人の作品や実在のブランドを想起させる見本は、使わないようにしましょう。見本に似たものを、AIはそのまま作ろうとするからです。

    ハーネスを用意しよう

     ハーネスとは、AIが迷わずに作業できるように、決まりや手順、道具をまとめておく仕組みのことです。毎回のプロンプトに書く代わりに、ファイルとして置いておきます。今回の制作で使ったハーネスは、大きく4つです。

    画像
    今回の制作で使ったハーネス

    AIへの指示書

     中心になるのは、CLAUDE.mdという、Claude Codeが作業の初めに読み込む指示書です。ここには、どの仕事をどの担当に任せるかと、守ってほしい決まりを書いています。制作した時点のCLAUDE.mdから、3Dモデリングに関わる決まりをいくつか抜き出します。

    • モデリングの前に、必ず設計書係で設計書を作る:作り始めてからの方向のぶれを防ぐため

    • 設計書が正。足りなければ作業を止めて報告する:設計書に無いことを、AIが推測で埋めないようにするため

    • Blenderのシーンを書き換える担当は、同時に1つだけ:複数の担当が同じシーンを壊し合わないようにするため

    • 見た目の検品の画像は原則4枚・上限8枚:寸法などは数字で確かめ、画像は数字で分からないことだけに使うため

    • 問題の再発防止は、ワークフロー・スキルの修正で行う:直したことを、次の作品でも使えるようにするため

     決まりの中には、前の作品で起きた失敗をもとに、私が指示して書き足してもらったものもあります。

    役割ごとのサブエージェント

     仕事は、役割ごとのサブエージェントに分けています。サブエージェントとは、Claude Codeが仕事を任せる、役割を絞った別のAIのことです。今回は、設計書係、モデリング係、テクスチャ係、レンダリング係、目視検品係の5つを用意しました。

    • 設計書係(Opus):参考資料を調べて設計書を書く

    • モデリング係(Opus):設計書どおりに形を作る

    • テクスチャ係(Sonnet):質感を作る。画像の生成はCodexに任せる

    • レンダリング係(Sonnet):ライト・カメラ・撮影

    • 目視検品係(Opus):画像を見て合否を出す(読み取り専用)

     それぞれに、役割と、使ってよい道具、使うモデルを決めた設定ファイルがあります。例えば目視検品係は、画像を見て合格か不合格かを決めるだけで、Blenderのシーンは書き換えられません。作る係と確かめる係を分けておくと、作った本人がそのまま合格を出してしまうことを防げます。

     今回は、メインのAIが、サブエージェントに16回、仕事を割り振っていました。

     この5つのサブエージェントの設定ファイルと、CLAUDE.mdの3Dモデリングに関わる部分は、記事の最後で、メンバーシップ限定で配布しています。

     正直、この記事で解説していることを参考にしてAIに作ってもらうことも可能だと思います。他にも公開している方はいらっしゃるかもしれませんし、そちらの方が性能が良いかもしれません。私のメンバーシップは活動へのご支援みたいなものですし、私の環境にご興味のある方はぜひ、という感じです。

    設計書と作業の計画

     最初に設計書係が、設定文とイメージ画像から、3冊の設計書を書いていました。1冊目は全体の設定と寸法、2冊目は部品の分け方と作る順番、3冊目は材質やライト、予算、受け入れのチェックです。作る順番や、録画の前にやる準備の計画も、この中に入っています。

     モデリング係はその計画どおりに作り、目視検品係が見て、直す所があればモデリング係に戻す、という流れです。

    手順書と道具

     作業の順番は、3Dアセットを作るときの手順書にも書いてあり、前の作品で分かった注意点が足されています。録画のときにカメラを動かす道具は、前の作品から使い回しています。寸法や重なりを数字で確かめるチェックスクリプトは、AIがこの街用に8本書いていました。

     ハーネスは、最初から完成しているものではありません。私の場合も、作品を作るたびに失敗が見つかり、そのたびに決まりや手順を書き足してきました。最初はうまくいかなくても、いくつもモデリングを重ねてフィードバックしていくことで、ハーネスも成長していきます。

    AIの作業を見守ろう

     ここからは、AIが街を組み立てていく作業です。AIは、まず設計書を書き、運河や街区の配置を「都市計画図」として作っていました。その図をもとに、湖、島の岸、運河の順に形が現れます。

     建物は、AIがテンプレートを作って、それを並べていました。8,662棟を、1棟ずつ作っているわけではありません。テンプレートができると、AIは都市計画図のとおりに建物を並べていきます。広場や大聖堂、ホテル、大きな橋は、専用のスクリプトで作っていました。色付けもAIです。テクスチャ用の画像を生成したのは3枚だけで、ほかの質感は、AIがノードを組んで作っていました。

     組み立てる様子は、録画しました。録画は、AIが書いたスクリプトをあとからもう一度実行して、その画面を、私がOBSで撮ったものです。カメラは、作った所がよく見える位置へ、スクリプトが自動で動かしています。

    途中の結果を見て、理由と一緒に伝えよう

     次に私がどんな修正指示をしたかを解説します。AIの作業の途中で、私は結果を見て、気づいたことを伝えたり、どうするかを決めたりしていきました。原因を調べて直す作業は、AIがやっていました。

     伝えたことを、順番に紹介します。かぎかっこの中は、実際に送った言葉です。

    画像
    途中で伝えたこと

    ① 進め方を決める

     AIが設計書を書いたところで、私は「次を進めて」と伝えました。

     設計書には、設定文にあった「浮舟市場」も入っていました。朝になると、たくさんの小舟が集まって開く、水の上の市場です。でも、朝の場面を入れると、時間の変化を作る手間が増えると思ったので、「朝の時間の設定は不要なので浮舟市場はなしでよいです」と伝えて、作る範囲を絞りました。

     そして、寝ている間にモデリング作業を進めてもらうために、「録画可能な段階になるまで承認は不要です」と任せました。

     翌日、AIが挙げてきた細かい点を見て、大きな問題は無いことを確かめたうえで、「大きな問題が無ければよいです」と伝え、そのまま進めてもらいました。

    ② 試し撮りを見て

     AIは、設定文に合わせて、夕暮れから夜の場面を作っていました。イメージ画像と見比べると暗く見えたので、まず「照明が暗く見えます。修正して」と伝えました。

     AIは、夕暮れのまま、灯りや窓の明かりを強くして、明るくしようとしていました。でも、夕暮れの場面だと、灯りや窓の明かりのライティングの設定に、手間がかかります。それを省くために、「夕方の場面にしているのがよくないので、昼間のレンダリングに変更して」と伝えました。

     このころAIは、直してはレンダリングして、自分で確かめて、また直す、というのを繰り返していて、なかなか直りませんでした。そこで、「今は私がレンダリング結果を確認するフェーズです。仕上げに時間をかけないで」と伝えました。

    ③ 昼の画像を見て

     昼にした最初の画像は、空が夕焼けのような色でした。そこで、「昼間なのに夕焼けになっていておかしい」「山肌も変ですが、空が白~赤みがかっているようにみえます」と伝えました。

     原因は、AIが調べていました。空の色を計算する向きが逆になっていて、山も、夕暮れ用の色のままだったそうです。直したあとは、青い空と、青みがかった山になりました。

    画像
    昼にした最初の画像(左)と、直したあと(右)

    ④ 直すか、残すかを決める

     AIは、まだ残っている点として、昼なのにランタンが光っていることと、水面の横縞を挙げてきました。私は、「水面は時間かかりそうなので保留。ランタンは直して」と決めました。

     全部を直そうとすると、時間がいくらあっても足りません。どこまで直すかを決めるのも、人間の仕事です。

    ⑤ 録画を見て

     1回目の録画を見ていて、おかしな所に気づきました。本来は、カメラが移動してからテクスチャが切り替わるはずなのに、カメラが移動する前に、テクスチャが切り替わっていました。そこで、「カメラ移動してから変化、というルールがテクスチャで守られていませんでした」と伝えました。

     AIは、テクスチャの所から録画し直す案と、最初から全部録画し直す案を出してきました。私は、録画のファイルが別々に分かれると面倒なので、全部録画し直す方を選びました。AIがスクリプトを直したあと、私がもう一度、最初から録画しました。

     途中のやり取りは、その時々で違います。「step08は何をするの?」「Cyclesだと重いからEEVEEにするのでは?」のように、分からないことは聞き、おかしいと思った所は、理由を添えて伝えていました。

    直したことを次に残そう

     伝えた修正点は、次の作品でも使えるように、スキルや文書に残すよう、AIに指示しています。指示しないと、AIは残さなかったり、勝手に自分のメモリーに残しても、必要なときに参照しなかったりするからです。

     今回のテクスチャの件も、録画の道具と、作業の手順書に書き足されています。次に別の街を作るときには、同じことを伝えなくても済むはずです。

     ハーネスが育つのは、このように人間が気づいたことを、ファイルとして残していくからだと私は考えています。

    まとめ

     最後に、AIでBlenderのモデリングをするときのポイントをまとめます。

    画像
    AIでBlenderのモデリングをするときのポイント

     1つ目は、見本を渡すことです。今回は、見た目の見本となる画像と、設定を記載した設定文を渡しています。

     2つ目は、途中の結果を自分の目で見て、直してほしい所を、理由と一緒に伝えることです。

     3つ目は、ハーネスを設計しておくことです。あらかじめ作る計画を立てておいたり、AIが間違えやすいポイントはあらかじめどうすればよいかをファイルに記載しておきましょう。最初はうまくいかなくても、いくつもモデリングを重ねてフィードバックしていくことで、ハーネスも成長していきます。

     みなさんも、まずは小さな建物1つから試してみてはいかがでしょうか。

    【メンバーシップ限定】ハーネス配布

     ここからは、メンバーシップ限定の内容です。今回の制作で使ったハーネスの実物を配布します。

     
     
    小説家|AIクリエイター & 研究者 & エンジニア|生成AI×創作|AI小説で世界初の文学賞|著書『小説を書く人のAI活用術』|第9回日経「星新一賞」優秀賞|第2回AIアートグランプリ佳作|日本SF作家クラブ会員|慶應SFセンター研究員

    あなたへのおすすめ