
Claude Codeが書いた資料の「出典の照合」だけを、別に頼む。URLが付いていることは、裏付けではない
Claude Codeにリサーチや資料の下書きを頼むと、出典のURLまで付けて返してくれます。見た目は、きちんと裏が取れた資料です。
ただ、出典が付いていることと、その出典が本当にその主張を裏付けていることは、別の話です。今日は「リサーチ」から、Claude Codeが書いた資料の「出典の照合」だけを、別に頼む理由と手順を書きます。

Claude Codeに、書いた流れのまま確かめさせると見落とす
資料を書いた会話の続きで「合っているか確かめて」と頼むと、多くの場合「確認しました」と返ってきます。自分で書いた流れに沿って読み返すので、ずれに気づきにくいのです。
そこで、照合は別の仕事として頼みます。うちでは、照合の手順をClaude CodeのSkill(作業の手順書)にしてあります。書いた会話とは分けて、資料と出典を渡し、「書く」のではなく「照らし合わせる」ことだけをしてもらいます。
Claude Codeに、出典の照合で見てもらう5つ
照合のときに見てもらうのは、次の5つです。
出典の該当箇所を実際に開く。URLがあること、出典名が書いてあることだけでは裏付けにしない
主体・対象・時点・範囲がそろっているか。誰が、何について、いつの時点で言っていることか
数字の単位・分母・期間。同じ「%」でも、何に対する割合かが違うことがある
一次情報か。まとめ記事ではなく、元の発表や資料まで遡る。同じ発表を転載した記事を、別の裏付けとして数えない
言っているのは誰か。公式の発表に書いてあるのは、発表した会社の主張。確かめられた結果とは分けて扱う

出典の照合の結果は、4つの言葉で返してもらう
照合の結果は、「OK」「NG」ではなく、次の4つの言葉で返してもらいます。
裏付けあり:出典の該当箇所で確かめられた
根拠と不一致:出典と書いてあることが違う
条件付き:出典の範囲や条件つきなら正しい
未確認:出典が開けない、該当箇所が見つからない
「記載・主張/出典の該当箇所/確かめた内容/結果・直すところ」の表にしてもらうと、どこを直せばいいかが一目で分かります。

出典の照合を実際にやった例:GPT-6 Sol・Lunaの記事
先日のGPT-6 Sol・Lunaの記事でも、書いたあとに発表の原文と照らし合わせました。
「SolはOpus 5の9%の費用」:発表の表では、Opus 5の費用はSolの11.1倍。逆算すると約9%で、裏付けあり。ただし、これは発表した会社の主張です
「料金は半額」:Solの入力・出力と、Lunaの入力は半額。Lunaの出力は1.20ドルから0.50ドルで、計算すると約58%下がっていて、条件付き
「Claudeより上」:比べている相手はOpus 5で、同じ日に出たOpus 5.5ではない。条件付き
どれも「間違い」ではありません。でも、条件を書かずに使うと、読んだ人が違う受け取り方をします。記事には、この条件をそのまま書きました。

出典の照合をやってみて分かったこと
一番大事なのは、「未確認」を未確認のまま残すことでした。確かめられなかったところは、もっともらしい言葉で埋めたくなります。照合の手順には「未確認を事実で補わない」と書き、「何が分からなくて、何を確かめれば分かるか」を書いてもらうようにしています。そうすると、次にやることがはっきりします。
なお、照合を別にしたことで見落としがどれだけ減ったかを、数字で比べたわけではありません。

このアカウントでは、AIを使って売れる仕組みをつくるためのやり方を、リサーチ/LP・制作/マーケティング業務/仕組み・組織の4つの柱で書いています。
次回は「LP・制作」から、Claude CodeにPowerPointの資料を作らせたら、全ページを画像にして確かめる話を書きます。
フォローしておいてもらえると、毎日の記事が届きます。