
AIに何を任せ、どこで人間が止めるか。実際にやってみた記録
なぜこの記録を書こうと思ったか
AIに調べ物や下書きを任せる機会が増えました。便利です。ただ、実際に任せてみると、「思ったより気が抜けない」と感じることがあります。
「AIにどこまで任せていいか分からない」という話は、それ自体はよく語られています。ただ、多くは「段階的に任せましょう」「小さいタスクから慣れましょう」という一般論で止まっていて、実際に何が起きて、どこで人間が止めたのか、という具体的な記録はあまり見かけません。
このnoteは、AIの正しい使い方を教えるものではありません。私たち(ANCHOVY-SHA)が、実際にAIと一緒に作業を進める中で、AIがどこまで進め、人間がどこで止め、なぜ止めたのかを、実際にあった出来事として記録したものです。
「効率化できる」だけでは済まなかった場面
ある企画を検討していたときのことです。AIに複数の方向性を比較させ、そのうち一つを詳しく詰めてもらいました。数十分もかからず、それなりに筋の通った企画書ができあがりました。
一見、効率化に成功したように見えました。ところが、後になって「この企画は本当に良いものなのか、それとも単に二つの案を並べただけなのか」を確認する場面があり、そこで話が変わりました。
続きでは、実際に何を確認し、何が分かったのかを記録しています。
ケース1:統合した企画を、あとから疑う
商品企画の検討中、2つの方向性をそれぞれ検討したあと、AIに「両方の良さを組み合わせた企画」を作らせたことがありました。読んだ印象は悪くなく、一見まとまった企画に見えました。
ただ、「AIが作ったから、採用してよい」とは考えず、一度立ち止まって「この企画は、単に2つの案を組み合わせただけで、新しい価値を生んでいないのではないか」という前提で、あらためて検証し直しました。
具体的には、「それぞれの案を単体で見たときにはなかった価値が、組み合わせたことで何か生まれているか」だけを問い直しました。結果、構成としては1つにまとまっているものの、中身は単純な足し合わせに近く、新しい価値が十分に生まれていない部分があると分かりました。AIが出した案自体が無駄だったわけではなく、「これで完成」と判断する前に、もう一段掘り下げる工程が必要だったということです。
分かったこと:複数の案を組み合わせた成果物は、見た目がまとまっていても、中身が単純な足し合わせにとどまっている場合がある。「組み合わせたことで何が新しく生まれたか」を、完成後にもう一度問い直す工程が必要になる。
ケース2:AIが有望と評価した候補を、反証で覆す
別の場面では、複数のテーマ候補をAIに比較させ、点数の高いものを「有望」として提示してもらいました。そのうちの1つは、既存の類似サービスが見当たらないという理由で、高く評価されていました。
ここで、その評価をそのまま受け入れず、「本当に既存の手段では代替できないのか」を、あらためて確認することにしました。実際に調べたところ、同じ課題に対して、個人の発信者が無料かつ実質的に同等の内容を、既にタイムリーに提供している実例が見つかりました。
この事実を踏まえ、当初AIが「有望」と評価していた候補を、あらためて見送る判断をしました。AIの比較・整理自体は役に立ちましたが、「既存の手段で足りるかどうか」の確認までは、AIの評価だけでは十分ではありませんでした。
分かったこと:AIの「有望」という評価は、比較の材料としては有効だが、それだけで採用を決めるのは危険。実際に無料で代替できる手段がないかを、人間が別途確認する必要がある。
ケース3:評価は高かったが、条件面で見送った候補
複数の候補を比較検討する中で、ある候補(公的な制度・基準に関わるテーマ)が、他の候補より高く評価されたことがありました。
しかし、その候補には、地域によって基準や内容が異なり、かつ制度改定のたびに内容を更新し続けなければならないという性質がありました。AIの評価は、その時点での内容の良し悪しを判断することはできても、「今後も価値を保ち続けられるか」という時間軸の判断までは十分にできていませんでした。
人間が、この地域差と更新の手間という2点を理由に、その候補を見送りました。
分かったこと:AIの評価は「今の時点の良し悪し」の判断には強いが、「今後も価値を保てるか」という時間軸の判断は、人間が別に確認する必要がある。
現時点での、仮のルール
3つの場面から、今のところ次のように考えています。あくまで暫定的なもので、今後変わる可能性があります。
複数のものを組み合わせた成果物は、「組み合わせたことで何が新しく生まれたか」を、あとから問い直す
点数や評価が高い候補は、点数の理由を確認し、可能なら実際に近い状況で試してみる
「今の良し悪し」と「今後も価値を保てるか」は別の軸として、両方を確認する
読者の方へ:確認ポイントを考えるための簡単な整理
ご自身でAIと作業を進める際に、以下を参考にしてみてください。
AIが作った成果物は、「見た目の完成度」と「中身の価値」を分けて確認したか
AIの評価・点数が高い理由を、自分で説明できるか
その評価は「今」の話か、「これから先」も通用する話か
一度採用しかけたものを、あとからもう一度疑ってみたか
これらは正解を示すものではなく、私たちが実際に立ち止まった場所を整理したものです。読んでくださった方が、ご自身の状況に当てはめて考えるための材料になれば幸いです。
このテーマの有料note
AIに任せるところと、人間が止めるところ。その線引きを、実際の仕事の返信文で試した有料note(¥300)です。
厳しい問い合わせへの返信をAIに下書きさせ、送信前に人間が確認する手順を、5つのポイントに整理しています。
無料部分だけでも概要は読めますので、ご興味ある方は是非ご覧ください。