メインコンテンツへスキップ
見出し画像

Claude Codeが書いた資料の「出典の照合」だけを、別に頼む。URLが付いていることは、裏付けではない

    Claude Codeにリサーチや資料の下書きを頼むと、出典のURLまで付けて返してくれます。見た目は、きちんと裏が取れた資料です。

    ただ、出典が付いていることと、その出典が本当にその主張を裏付けていることは、別の話です。今日は「リサーチ」から、Claude Codeが書いた資料の「出典の照合」だけを、別に頼む理由と手順を書きます。

    画像

    Claude Codeに、書いた流れのまま確かめさせると見落とす

    資料を書いた会話の続きで「合っているか確かめて」と頼むと、多くの場合「確認しました」と返ってきます。自分で書いた流れに沿って読み返すので、ずれに気づきにくいのです。

    そこで、照合は別の仕事として頼みます。うちでは、照合の手順をClaude CodeのSkill(作業の手順書)にしてあります。書いた会話とは分けて、資料と出典を渡し、「書く」のではなく「照らし合わせる」ことだけをしてもらいます。

    Claude Codeに、出典の照合で見てもらう5つ

    照合のときに見てもらうのは、次の5つです。

    1. 出典の該当箇所を実際に開く。URLがあること、出典名が書いてあることだけでは裏付けにしない

    2. 主体・対象・時点・範囲がそろっているか。誰が、何について、いつの時点で言っていることか

    3. 数字の単位・分母・期間。同じ「%」でも、何に対する割合かが違うことがある

    4. 一次情報か。まとめ記事ではなく、元の発表や資料まで遡る。同じ発表を転載した記事を、別の裏付けとして数えない

    5. 言っているのは誰か。公式の発表に書いてあるのは、発表した会社の主張。確かめられた結果とは分けて扱う

    画像

    出典の照合の結果は、4つの言葉で返してもらう

    照合の結果は、「OK」「NG」ではなく、次の4つの言葉で返してもらいます。

    • 裏付けあり:出典の該当箇所で確かめられた

    • 根拠と不一致:出典と書いてあることが違う

    • 条件付き:出典の範囲や条件つきなら正しい

    • 未確認:出典が開けない、該当箇所が見つからない

    「記載・主張/出典の該当箇所/確かめた内容/結果・直すところ」の表にしてもらうと、どこを直せばいいかが一目で分かります。

    画像

    出典の照合を実際にやった例:GPT-6 Sol・Lunaの記事

    先日のGPT-6 Sol・Lunaの記事でも、書いたあとに発表の原文と照らし合わせました。

    • 「SolはOpus 5の9%の費用」:発表の表では、Opus 5の費用はSolの11.1倍。逆算すると約9%で、裏付けあり。ただし、これは発表した会社の主張です

    • 「料金は半額」:Solの入力・出力と、Lunaの入力は半額。Lunaの出力は1.20ドルから0.50ドルで、計算すると約58%下がっていて、条件付き

    • 「Claudeより上」:比べている相手はOpus 5で、同じ日に出たOpus 5.5ではない。条件付き

    どれも「間違い」ではありません。でも、条件を書かずに使うと、読んだ人が違う受け取り方をします。記事には、この条件をそのまま書きました。

    画像

    出典の照合をやってみて分かったこと

    一番大事なのは、「未確認」を未確認のまま残すことでした。確かめられなかったところは、もっともらしい言葉で埋めたくなります。照合の手順には「未確認を事実で補わない」と書き、「何が分からなくて、何を確かめれば分かるか」を書いてもらうようにしています。そうすると、次にやることがはっきりします。

    なお、照合を別にしたことで見落としがどれだけ減ったかを、数字で比べたわけではありません。

    画像

    このアカウントでは、AIを使って売れる仕組みをつくるためのやり方を、リサーチ/LP・制作/マーケティング業務/仕組み・組織の4つの柱で書いています。

    次回は「LP・制作」から、Claude CodeにPowerPointの資料を作らせたら、全ページを画像にして確かめる話を書きます。

    フォローしておいてもらえると、毎日の記事が届きます。

     
     
    AIを使って、売れる仕組みをつくる。マーケとコンサルの会社を経営。Claude CodeとCodexで実際に作ったリサーチ、LP、提案資料、業務の仕組みを公開します。使える手順と雛形は有料記事にまとめています。

    あなたへのおすすめ