メインコンテンツへスキップ
見出し画像

「AIをブロックすれば守れる」は、半分だけ正しい|サイトとコンテンツをAI時代に守る方法

    自分が時間をかけて書いた記事が、いつのまにか生成AIの学習材料になり、そのAIが中身をさらっと要約して答えてしまう。検索した人はAIの回答で満足して、もう元のサイトには来ない。
    ——これは、サイトやブログを運営したことのある人なら、一度は感じたことのある不安だと思う。そしてその不安は、少しずつ、データの上でも裏づけられはじめている。
    だから「AIをブロックしよう」と考えるのは、とても自然な流れだ。でも、結論から言ってしまうと、それだけでは守りきれないし、ブロックが最善の一手とも限らない。
    「じゃあ、どうすればいいの?」と思うかもしれない。この記事は、サイトとコンテンツをAIから守るための考え方を、“入口の技術”から“本質的な戦略”まで、順番に整理してみる。
    先に結論を言っておく。ほんとうの防衛は、囲い込むことではなく、「AIには作れないもの」を持つことだ。

    まず5行でまとめると

    • AIによる「学習」と「検索での要約」で、サイトに人が来ないまま情報だけ使われる——その不安は、いま多くの運営者が抱えている。

    • 入口の対策として、robots.txt や llms.txt でAIのクローラーを“ある程度”コントロールできる。ただし、これは強制力のある壁ではない。

    • AIのボットには「学習用」と「検索用」があり、全部ブロックするのが正解とは限らない。検索用まで閉じると、AI検索から見つけてもらえなくなる。

    • どんなに囲い込んでも、完全な防御は不可能。技術だけでの守りには、はっきり限界がある。

    • 最後に効くのは、AIには作れない「一次情報」や独自の視点。それは守りであると同時に、AI時代に“選ばれる”ための武器にもなる。

    いま、サイト運営者に起きていること

    まず、何が起きているのかを整理しよう。ざっくり言えば、二つの流れが同時に進んでいる。

    一つは、学習。生成AIは、ウェブ上の膨大なテキストを材料にして賢くなる。あなたの書いた記事も、その材料の一つとして読み込まれている可能性がある。もう一つは、検索での要約。GoogleのAIによる概要(AI Overviews)や、ChatGPTのような対話型の検索は、いくつものサイトの中身をまとめて、その場で答えを返す。検索した人は、リンクをクリックしなくても、知りたいことが分かってしまう。

    この「クリックせずに終わる検索」は、ゼロクリックと呼ばれ、静かに増えている。ある調査では、検索した人のうち実際にサイトを訪れる人の割合が、4割ほどにまで下がったとも言われる。AIによる概要が出る検索では、1位のクリック率が大きく落ちる、という分析もある。

    ただし——ここは冷静にいきたい。別の調査では、AIによる概要が出ても、ゼロクリックはむしろわずかに減ったという結果も報告されている。つまり、「AIのせいで流入が壊滅する」と決めつけるには、まだデータが揺れている段階だ。過度に恐れる必要はない。でも、地面が動きはじめているのは、確かだ。

    それでも、もやもやする気持ちは、よく分かる。時間と手間をかけて書いた記事が、断りもなく吸い上げられ、要約だけがどこかで使われる。汗をかいたのはこちらなのに、果実だけを持っていかれるような感覚。この“ただ乗りされている”という感覚こそ、多くの運営者が守りに動きだす、出発点なのだと思う。だからまずは、その「入口」の仕組みを、きちんと理解することから始めよう。

    画像

    守り方①:まず「入口」を知る——robots.txt の話

    では、具体的な守りに入ろう。いちばん基本になるのが、robots.txt というファイルだ。

    これは、サイトの入口に貼っておく“お願いの札”のようなもの。「このロボットは入っていいですよ」「あなたは遠慮してください」と、巡回プログラム(クローラー)ごとに指定できる。AI各社のクローラーにも名前がついていて、それを名指しで指定できる。

    ここで大事なポイントが一つある。AIのボットには、大きく分けて二種類あるということだ。

    一つは、学習用のボット。コンテンツを集めてAIの訓練に使うが、こちらのサイトに人を送り返してはくれない。もう一つは、検索用のボット。AI検索の回答を作るときに参照し、その回答に出典として載れば、そこからの訪問が見込める。つまり、前者はこちらが与えるばかり、後者はお互いさま、という違いがある。

    だから、単純に「AIは全部ブロック」は、必ずしも得策ではない。学習用は断り、検索用は通す——そうやって、与えるものと受け取るもののバランスを取る、という考え方がいまの主流になりつつある。

    実際の書き方は、身構えるほど難しくない。robots.txt に、断りたいボットの名前を書いて「あなたは全ページ遠慮してください」と指定するだけだ。AI各社は、自社のクローラーの名前を公式サイトで公開しているので、それを調べて並べればいい。ただし、さっきも触れたように、名前も方針もよく変わる。数か月に一度は見直す前提で、まずは一度、設定してみるところから始めるのがいい。

    画像

    守り方②:llms.txt という、新しい道しるべ

    robots.txt が「入っていいか・だめか」の門番だとすれば、最近しずかに広がりはじめているのが、llms.txt という別のファイルだ。

    こちらは、門番というより案内係に近い。AIがサイトを読むときに、広告やメニューといったノイズに惑わされず、「このサイトの本質はここですよ」と要点へ案内するための地図のようなものだ。近ごろのAI検索は、その場でウェブを読みに行って答えを組み立てる。だから良い地図を先に置いておけば、こちらの意図どおりに引用されやすくなる——という発想だ。

    ただし、これも過信は禁物。llms.txt は、まだ標準として固まりきっていない、いわば試行段階の取り組みだ。置いたからといって、検索順位が上がると約束されているわけではない。それでも、導入する動きは少しずつ出てきており、「今のうちに用意しておく」価値はある、と見る向きも多い。守りというより、AI時代の作法を先に身につけておく、くらいの温度感がちょうどいい。

    守り方③:画像とイラストは、別の守りがいる

    コンテンツは、文章だけではない。自分で撮った写真、描いたイラスト、手間をかけて作った図解——画像もまた、真似され、学習される対象だ。そして画像には、文章とは少し違う守り方がある。

    まず基本は、ウォーターマーク(透かし)。サイト名やロゴを画像に薄く入れておけば、どこかに転載されても出どころが分かり、無断利用への抑止になる。あわせて、他サイトから自分の画像を直接読み込ませる“直リンク(ホットリンク)”を防ぐ設定もしておきたい。勝手に使われたうえ、サーバーに負荷だけかけられる——それを避けられる。

    イラストレーターや写真家のあいだでは、もう一歩踏み込んだ技術も登場している。人間の目にはほとんど分からない加工を画像にほどこし、AIが学習しようとしても、その特徴をうまく捉えられないようにする——そんな“学習を邪魔する”ツールも、研究され、使われはじめている。ただし、これらもイタチごっこの側面があり、万能ではない。ここでも結論は、やっぱり同じだ。技術的な防御は「時間稼ぎ」として割り切り、本丸は別にある、と考えておくのがいい。

    ただ、画像には一つ、文章にはない強みもある。透かしや署名という「使われた証拠」を、あとに残しやすいことだ。だから画像の守りは、完全に防ぐことよりも、「無断で使われたら、それと分かる状態にしておく」ことへ軸足を置くと、現実的に効いてくる。

    でも、囲い込みには限界がある

    ここまで入口の技術を見てきて、はっきりさせておきたいことがある。これらは、絶対の防壁ではない。

    robots.txt も llms.txt も、しょせんは“お願い”だ。行儀のいいAI企業はきちんと従ってくれるが、ルールを無視して勝手に集めていく、行儀の悪いプログラムも世の中には存在する。技術的に「絶対に読ませない」を実現するのは、公開しているコンテンツである以上、原理的にとても難しい。

    つまり、囲い込みでできるのは、あくまで“ある程度”のコントロールまで。鍵をかけるのは大事だが、鍵だけでは家は守りきれない。ここで発想を切り替える必要がある。塀を高くする競争から、そもそも真似されても揺るがない“中身”をつくる、という方向へ。守りの主戦場は、技術ではなく、コンテンツそのものへと移っていく。

    ほんとうの防衛は、「AIが作れないもの」を持つこと

    では、AIに真似できないコンテンツとは、何か。答えは、はっきりしている。それは、一次情報だ。

    一次情報とは、自分でしか持ち得ないデータ、経験、そこから生まれた見立てのこと。ネットを探しても出てこない、だからAIも生成できない情報のことだ。自分で集めた数字、自分の目で見た現場、自分の頭で立てた仮説。これらは、既存の文章をいくら混ぜ合わせても作れない。

    具体的に言えば、こういうものだ。自分で取ったアンケートの結果。何年もつけ続けてきた記録や観察。現場に足を運んで撮った写真と、そこで感じたこと。うまくいかなかった失敗から、身をもって学んだ教訓。あるいは、バラバラの事実をつなぎ合わせて出した、自分なりの結論。——どれも、検索してコピーすることはできない。なぜならそれは、“情報”である前に、あなたが実際に動いた“結果”だからだ。

    面白いのは、ここで守りと攻めが、くるりと入れ替わることだ。AI検索は、答えの出典を選ぶとき、独自のデータや具体的な数字を含む記事を、むしろ優先して引用する傾向があるという。どこにでもある情報を並べただけの記事は、AI検索の引用元にすら選ばれない。逆に言えば、AIに真似できない一次情報は、隠すべき弱点ではなく、AIに選ばれるための武器になる。囲い込むのではなく、堂々と一次情報を打ち出したほうが、結果的に強い。

    検索品質の世界では、この価値を「経験・専門性・権威性・信頼性(E-E-A-T)」という言葉で整理している。むずかしく聞こえるが、要は「その人が、実際にやった・調べた・分かっている」という手ざわりのことだ。現場で汗をかいた実感、失敗から得た教訓、数字の裏にある温度。AIは事実を並べることはできても、その体験の“重み”までは背負えない。

    僕はこの逆転こそがAI時代の核心だと思う。サイトを守るという言葉の意味は、この数年で正反対になった。かつては「盗まれないように囲う」ことだった。でもこれからは、「AIには決してたどり着けない場所に、自分だけの価値を積み上げる」ことだ。塀を高くするのは、しょせん時間稼ぎにすぎない。ほんとうの堀(ほり)は、コンテンツそのものの、真似できない深さのほうにある。

    「守る」から「選ばれる」へ

    整理しよう。robots.txt と llms.txt で入口を賢く設計し、与えるボットと通すボットを見極める。ここまでは、必要な“基礎工事”だ。でも、それだけでは半分でしかない。残りの半分——そして、いちばん効くのは、AIには作れない一次情報を持ち、それを堂々と打ち出すことだ。

    具体的な順番で言えば、こうなる。まず、robots.txt で、与えるボットと通すボットを仕分ける。次に、llms.txt で、自分のサイトの要点への“案内”を用意する。そして最後に——ここがいちばん時間はかかるが、いちばん効く——AIには作れない一次情報を、一つずつ積み上げていく。前の二つが一日で終わる作業だとすれば、最後の一つは、たぶん一生かけて育てていくものだ。だからこそ、それは誰にも、AIにさえも、簡単には奪えない。

    「AIから守る」と身構えると、つい高い塀のことばかり考えてしまう。でも本当に問われているのは、「AIがどれだけ賢くなっても、それでもこのサイトに来る理由は何か」という、もっと前向きな問いなのだと思う。その問いに自分の言葉で答えられるサイトは、AI時代でも生き残る。むしろ、選ばれる。

    逆に、その問いに答えられないサイトは——たとえ塀を完璧に高くしたところで、そもそも誰からも必要とされなくなっていく。少し皮肉な話だ。いちばん確かな防御とは、結局のところ「守らなくても人がやって来る理由」を、自分のなかに持っていることだ。囲うために費やす労力があるなら、その半分でも、中身を深くすることに回したほうがいい。

    この「AIにできること・人間にしかできないこと」の線引きについては、占いを題材にして、べつの記事でも考えてみた。よかったら、こちらも。

    塀の高さで消耗するのは、そろそろ終わりにしていい。

    この記事について(注意)

    • AIクローラーの名称や各社の方針、robots.txt / llms.txt をめぐる状況は、非常に速く変化している。実際に設定する際は、必ずOpenAI・Google・Anthropicなど各社の公式ドキュメントで、最新のユーザーエージェント名や方針を確認してほしい(少なくとも数か月ごとの見直しが望ましい)。

    • 検索流入やゼロクリックに関する数値は、複数の調査会社が公表したものだが、調査手法や対象によって結果に幅があり、相反する報告もある。本記事は特定の一つの数字を断定するものではない。

    • 本記事は、特定のAIサービスや企業の優劣を評価するものではなく、サイト運営者が取りうる考え方を一般的に整理したものだ。

    自分でデータを集め、自分の頭で考える——ポケミミは、そういう“一次情報”を大切にしています。ポケモンカードの相場・環境データは、下記で毎日更新中。

    ポケミミ:pokemimi.com
    ポケミミTools:pokemimi.com/tools/
    ポケミミDesign:pokemimi.com/design/
    シティリーグキャンセル待ち:discord.gg/GzZTXRkjAg

    スキ ♡ とフォローは、次の記事を作る時の励みになります。

     
     
    社会は人間攻略できれば最強かもしれない。時代に逆行する濃厚分析。 出版社・メーカーなどと自分の人生の学びから、 仕事・恋愛・結婚・家族のすべての人間関係を、科学と心理学と社会学で解剖する。 色んなシステム・ツールも作ります。基本は脳内アウトプットの場。

    あなたへのおすすめ