
AIに週報をチェックさせたら、ずれを見つける?|わざと入れた5か所を、10回とも全部挙げた(ChatGPT・Claude 各5回)
こんにちは、企画の整理室のナオです。
※条件:2026年11月8日に、同じメモ・同じ下書き・同じ依頼文で、ChatGPTとClaudeに各5回、計10回確認させました。ChatGPTは一時チャットのGPT-6(思考量「中程度」)、ClaudeはシークレットチャットのOpus 5.5(「高」)です。毎回新しい会話で、再生成はしていません。
※メモの店・人物・数字・出来事は、すべて架空の教材です。確認させた週報の下書きは、私がずれを5か所わざと入れて作った「教材例」で、AIの出力ではありません。数え方(正解表)は、出力を見る前に決めて保存しました。
以前の記事に、Excelの数字をAIに作らせて、自分で検算しているというコメントをいただきました。
では、文章はどうでしょう。AIが書いた週報を、元のメモと照らす作業。これ自体をAIに頼んだら、ずれを見つけてくれるのか。今回は、答えの分かっている下書きで数えてみました。
試したこと
元のメモは、以前の検証(11月8日公開の記事)と同じ、架空のお店の発送担当のメモです。
【今週の数字】(対象週:2026年11月2日〜11月6日)
・発送件数:まだ集計していない
・遅れて発送した注文:3件(遅れた理由は、まだ聞いていない)
・返品の受付:0件
【メモ】
・梱包用の箱(中サイズ)の在庫が少ない。発注するかどうかは、まだ決めていない(何箱残っているかは数えていない)
・倉庫の棚の入れ替えは、途中まで。どこまで終わったかは、11月9日(月)に確認する
・来週の予定:まだ決めていない
書き手:発送担当 森
このメモから書いた、という設定の週報の下書きです(教材例)。
店長
今週(11月2日〜11月6日)の週報です。
1. 今週の数字
・発送件数:まだ集計していません
・遅れて発送した注文:3件。配送業者の集荷が遅れたためです。
・返品の受付:0件
2. 在庫・作業
・梱包用の箱(中サイズ)の在庫が少なくなっています。残りは約20箱です。
・箱を発注するかどうかは、まだ決めていません。
・倉庫の棚の入れ替えは、ほぼ終わっています。どこまで終わったかは、11月10日(火)に確認します。
3. 来週の予定
・遅れた理由を確認して、来週中にご報告します。
以上です。
発送担当 森
入れたずれは、次の5か所です。
遅れの理由「配送業者の集荷が遅れたため」(メモでは、理由はまだ聞いていない)
箱の残り「約20箱」(メモでは、残りは数えていない)
棚の入れ替え「ほぼ終わっています」(メモでは「途中まで」)
確認の日「11月10日(火)」(メモでは11月9日(月))
来週の予定「遅れた理由を確認して、来週中にご報告します」(メモでは、来週の予定はまだ決めていない)
1と5は、これまでの検証でAIが実際に足してきた種類のずれ(理由の推測、メモにない約束)に寄せました。対象週・発送件数・3件・0件・発注は未定・書き手は、メモどおりにしてあります。箱の在庫が少ない点も同じですが、「少ない」を「少なくなっています」と言い換えています。この違いは、今回数える5か所には含めていません。
依頼文は、メモと下書きの前にこれだけです。
次の「元のメモ」と、それをもとに店長あてに書いた「週報の下書き」を照らし合わせてください。
下書きの中で、元のメモと合わないところ(メモに書いていないこと、メモと違うこと)を、すべて挙げてください。
数えたのは2つです。5か所のうち、いくつ挙げたか。メモどおりのところを、ずれと言わなかったか。
私の予想は、5か所はどちらもほぼ見つける(9割以上)、見落とすなら日付か「ほぼ終わっています」の箇所、というものでした。
結果
5か所とも挙げたのは、10回中10回でした(ChatGPT 5回・Claude 5回、計50か所中50か所)
メモどおりのところを、ずれと言った出力は0回でした
10回とも、最初に「5か所」と数を言い、挙げたのもちょうど5か所でした。見落とす可能性を考えていた日付と進み具合も、10回とも挙がりました
どう挙げたか
ChatGPTは5回とも表にしていました。1回目の、日付の行です。
「11月10日(火)に確認します。」
日付が違う。 メモでは「11月9日(月)」に確認する予定です。
Claudeは5回とも、番号付きで「下書き/メモ」を並べていました。2回目の、日付の項目です。
下書きは「11月10日(火)」ですが、メモでは「11月9日(月)」です。日付と曜日が違います。
5つ目の「来週中にご報告します」も、10回とも、メモでは来週の予定が決まっていないことを示して挙げていました。ChatGPTの4回目です。
メモにない予定。 メモでは「来週の予定はまだ決めていない」となっています。遅れた理由を確認することも、来週中に報告することも決まっていません。
10回中9回は、メモと合っている項目にも最後に触れていました(Claudeの4回目は、直し方の案で終わっていて、この一文はありません)。挙げた項目は回によって違いますが、合っている項目を、ずれとして挙げた回はありませんでした。
Claudeだけが書いたこと
Claudeは5回とも、5か所のほかに、下書きの中の食い違いにも触れていました。1回目です。
また、1. で理由を書いているのに、ここで「理由を確認する」としているため、下書きの中でも話がつながっていません。
「集荷が遅れたため」と言い切った後で、「理由を確認して報告します」。たしかに、読む側は「結局、理由は分かっているの?」となります。ChatGPTの5回は、この点には触れていませんでした(5回目は「件数は一致していますが、理由の説明が追加されています」まで)。
残った問題
依頼文では「挙げて」としか頼んでいませんが、Claudeの4回目と5回目は、直し方の案も付けていました。5回目の案です。
・1:「遅れた理由は、まだ確認できていません。」
・2:「残りの数は、まだ数えていません。」
・3:「途中まで進んでいます。どこまで終わったかは、11月9日(月)に確認します。」
・5:「まだ決めていません。」
メモにない予定や数字は入っていません。ただ、1の「まだ確認できていません」は、メモでは「まだ聞いていない」です。確認しようとしたけれど、できていない、とも読めます。4回目の案も同じ言い方でした。ずれを見つけた後の直し方にも、小さな言い換えが入ることがあります。
それから、今回の結果で言えるのは、この下書きの、この5か所までです。
ずれは、私が答えを知っている状態で入れたものです。理由・数字・日付・約束と、比べればはっきり分かる種類でした
「まだ聞いていない」を「確認中」にする言い換えは、この下書きには入れていません。一方、「在庫が少ない」を「少なくなっています」にした表現は入っています。この違いは事前に決めた検出対象の5か所には含めておらず、10回とも、この言い換えには触れていませんでした。50か所中50か所という結果は、細かい言い換えまで全部見つけた、という意味ではありません
AIが自分で書いた下書きを、同じ会話のまま確かめさせることもしていません。今回は毎回、新しい会話に、メモと下書きを貼って頼みました
送る前に見るところ
照らしてもらうときは、元のメモと下書きを両方貼る(今回は、新しい会話に両方を貼り、「メモと合わないところ」をすべて挙げるよう頼みました)
挙がった箇所は、自分でも元のメモで1つずつ確かめる(数が合っていても、どこを指しているかは自分の目で)
直し方の案をもらったら、案のほうもメモと照らす(「まだ聞いていない」が「まだ確認できていません」になっていないか)
今回は、事前に数えると決めた5か所が、10回とも挙がりました。この教材例では、元のメモとの違いを挙げてもらえました。ただ、細かい言い換えや、直し方の案まで任せられると分かったわけではありません。送る前に元のメモと最後に見比べるのは、やっぱり送る本人の仕事だと思います。(ナオ)
AIの下書きを、AIにもう一度チェックさせることはありますか。コメントで一言もらえるとうれしいです。
自分の週報でも、下書きを元のメモと照らして直したい方へ
以前の検証では、週報の3つのケースで、ChatGPTとClaudeに各2回ずつ書かせました(2026年10月25日)。計12回で、判定規則で数える誤りは出ませんでしたが、要確認・保留として残した記述がありました。
自分のメモから週報を作り、下書きを元のメモと照らして直すためのセットをまとめました。入力シート(.txt・.docx)、AIに渡す依頼文、送る前の確認表10項目、修正用の指示文13種類(実際に試したのは3種類。残り10種類は未検証の教材例)が入っています。確認表は、自分の目で照らすためのもので、「未確認」「対応中」がそのまま残っているか、予定・担当・期限を決まっていないのに決まったように書いていないか、日付が合っているか、などを見ます。
この記事の10回の結果と、今回の「照らし合わせ」の依頼文は、セットには入っていません。
無料部分では、架空のメモから、依頼文の全文、下書き、確認結果まで読めます。自分のメモでも同じ手順を使いたい方は、中身をご覧ください。
https://note.com/fancy_heron5928/n/n6903d5b078d5
「ChatGPT・Claudeで週報を書く|『対応中・未確認』を整理する入力シートと確認表」(980円)