メインコンテンツへスキップ
見出し画像

スマホのスクショをAIで整理できる? 14枚の画像で試してみた

    スマホのスクリーンショットは、気づくと何百枚もたまっています。あとで見返すつもりで撮ったのに、メディアタイプでスクショだけを集めて見ることはできても、撮った理由までは整理されないので、探すのは大変です。

    この記事では、スクショをAIに分類させる方法を整理します。先に結論を書きます。分類の基準は「何が写っているか」ではなく「なぜ撮ったか」で決めること。そして、その「なぜ」はAIが画像から当てるものではなく、撮った本人が決めるものです。AIの仕事は、画像の内容から分類の候補を提案することまでです。後半では、自作のダミースクショ14枚で実際に試した結果も紹介します。

    1 スクショがたまる理由と、写真アプリでできること

    スクショがたまるのは、保存のしかたに受け皿が少ないからです。iPhoneの写真アプリでは、メディアタイプでスクリーンショットだけを集めて表示でき、写真の中の文字で検索したり、キャプションを付けたり、自分でアルバムを作って分けて置いたりできます。Google フォトには、レシートや身分証明書などの文書を種類で振り分ける「ドキュメント」の仕組みがあります。

    ただし、どちらも「何が写っているか」での整理です。「行きたいお店」「あとで読む」といった撮った理由で分ける機能は、標準の写真アプリには用意されていません。撮った理由で分けたいなら、別の手が要ります。スクショ整理の専用アプリもあり、自動分類などの機能を提供するものがあります。この記事で扱うのは、チャットAIに分類の候補を出させる方法です。専用アプリとの違いは第6節にまとめます。

    2 分類テンプレート:6つのカテゴリと「未分類・要確認」

    分け方は次の6つ+1つです。スクショ整理アプリKeepNestの公式ガイドでも、カテゴリは5〜6個までにとどめ、「何が写っているか」ではなく「なぜ撮ったか」で分けることが勧められています。

    • 行きたい・買いたい:カフェ・レストラン・商品・宿・観光スポットの保存

    • あとで読む・見る:記事・SNSの投稿・動画の保存

    • 手続き・お金:レシート・支払いの記録・予約・チケット

    • 保存しておく情報:レシピ・時刻表・使い方・メモ

    • 会話・連絡:チャット・DM・メールの保存

    • 削除候補:エラー画面・設定画面など、一時的な確認のためのもの

    • 未分類・要確認:どれにも入らないもの、画像だけでは目的が判断できないもの

    大事なのは「未分類・要確認」の扱いです。これはAIの失敗ではありません。たとえばレストランのSNS投稿のスクショは、行きたいから撮ったのか、記事として読みたいから撮ったのか、営業時間を覚えたくて撮ったのかで、入るカテゴリが変わります。画像だけでは決められないものは、無理に1つに決めず「未分類・要確認」にして、本人が目的を思い出して確定します。

    「削除候補」についても線引きがあります。AIに「削除候補」と表示させるところまでで、実際に消すかどうかは本人が決めます。保証書や予約内容、支払いの記録は、見た目だけでは要るかどうか判断できません。AIが不要と判定した画像を自動で消す運用にはしないでください。

    なお、この6つが誰にとっても最適な数というわけではありません。まずはこの6つで試して、合わなければ自分の使い方に合わせて変えてよい、という前提のテンプレートです。

    3 実測:ダミー14枚で確かめた

    この分類が実際に機能するかを、自作のダミースクショで確かめました。設計は次のとおりです。

    • 素材:ダミーのスクショ14枚を自作しました。内訳は、6カテゴリ×各2枚の通常例12枚と、2つの顔がある境界例2枚(レストランのSNS投稿、ホテルの予約確認画面)です。店名・人名・日時はすべて架空で、個人情報は入れていません

    • 正解の固定:各ダミーについて「作った側の意図するカテゴリ」を、AIに見せる前に固定して記録しておきました。あわせて、画像の中に保存目的を読み取れる手がかりがあるもの(Aタイプ:5枚)と、制作側の意図だけで画像からは目的を断定できないもの(Bタイプ:7枚)に分けました。Bタイプで「未分類・要確認」と返ってきても、それは失敗ではなく、指示どおりの振る舞いとして数えます

    • 条件:ChatGPTとGeminiそれぞれで、14枚を7枚ずつ2回に分けて送る試行を、独立した新しい会話で2回ずつ実施しました(2026年11月18日)。したがって、各AIは合計28件の画像判定を行っています。依頼文は第4節のプロンプトと同じ文面です。Claudeは都合により未実施です

    • 評価は2段階にしました。(a) 参考記録として、意図したカテゴリが提示された候補に含まれていた枚数を数える。(b) 安全性として、目的を断定せず、複数候補・「未分類・要確認」・確認質問で返したかを記録する。AIどうしの順位づけはしません

    結果です。

    候補に意図したカテゴリが含まれていた枚数(参考記録)は、ChatGPTが1回目・2回目とも12枚中10枚、Geminiが1回目11枚・2回目10枚でした。先頭の候補が意図と一致したのは、ChatGPTが両回とも8枚、Geminiが1回目11枚・2回目8枚です。タイプ別では、Aタイプ(手がかりあり)はChatGPT 4/5・4/5、Gemini 5/5・4/5。Bタイプ(意図のみ)は両AIとも各回6/7で、Bタイプでも意図したカテゴリは候補に入ることが多い一方、先頭に来るとは限りませんでした。

    候補から外れたのは、「削除候補」を意図した2枚に集中しました。エラー画面では、ChatGPTは両回とも削除候補を出さず、「エラー内容の確認や問い合わせに使う可能性があるため、画像だけでは不要と断定できない」としました。Geminiは1回目に削除候補、2回目は未分類・要確認と、回によって割れました。設定画面では、両AI・両回とも削除候補は一度も出ませんでした。「確認のためだけに撮った」ことは画像からは分からないためで、削除候補の確定は本人の役割が大きいことが分かりました。

    境界例2枚は、両AI・両回とも合格でした(目的を1つに断定した回答はありません)。レストランのSNS投稿では、ChatGPTは「行きたい・買いたい」と「あとで読む・見る」の2候補を示し、Geminiは候補を1つに絞ったうえで、確認質問で目的を確かめる形でした。ホテルの予約確認画面では、両AIとも「保存しておく情報」を先頭に置きました。第二候補も4回答すべてで示されていて、ChatGPTは両回とも「手続き・お金」、Geminiは両回とも「行きたい・買いたい」でした。予約画面は手続きの記録であると同時に、あとで見返す情報でもある、という読

    みです。


    実例を2件、画像つきで紹介します。

    実例1:エラー画面。作った側の意図は「削除候補」です。

    画像

    ChatGPTは両回とも削除候補を出さず、「未分類・要確認/保存しておく情報」としました。理由は、エラー内容の確認や問い合わせに使う可能性があるため、画像だけでは不要と断定できない、というものです。Geminiは1回目に「削除候補」、2回目は「未分類・要確認」と、回によって分かれました。

    実例2:ホテルの予約確認画面。予約の控えとして「手続き・お金」、宿の情報を残す目的で「行きたい・買いたい」のどちらにも読める境界例として作りました。

    画像

    ChatGPTは両回とも「保存しておく情報/手続き・お金」、Geminiは両回とも「保存しておく情報/行きたい・買いたい」と、2つの候補を示しました。先頭の候補は両AIとも「保存しておく情報」で一致しましたが、第二候補は分かれました。

    回による変動も見ました。ChatGPTは2回とも、候補の組が全画像で同一でした。Geminiは14枚中7枚で候補の組が変わりました(2回目に「保存しておく情報」を相方候補に足す動きと、エラー画面の扱いの入れ替わりが中心です)。同じAIでも、1回の回答を固定的な判定として扱わない方がよさそうです。

    理由の面では、両AIとも画像に表示されている店名・金額・日時をもとに理由を書いており、画像にない目的や店名を補った例は見当たりませんでした。

    言えることと、言えないことを分けておきます。言えるのは、この14枚の範囲では「候補+確認質問」という返し方が守られ、意図した分類は多くの場合、候補の中に入っていたことです。言えないのは、実在のスクショでの精度(ダミーは読みやすく作ってあります)、何百枚も処理する使い方の可否(今回は14枚を分けて送りました)、そしてAIどうしの優劣です(各2回では断定できません)。

    4 コピペで使えるプロンプト

    分類を頼むときの文面は、次の1つで足ります。第2節の考え方(目的が分からなければ決めない、候補が2つあれば両方出す、削除はしない)を、そのまま指示に入れてあります。引用ブロックの中が、そのままコピーして使える文面です。

    添付したスクリーンショットを、保存した目的に合わせて整理するための分類候補を出してください。
    使う分類は「行きたい・買いたい」「あとで読む・見る」「手続き・お金」「保存しておく情報」「会話・連絡」「削除候補」「未分類・要確認」です。
    画像に写っていることだけを根拠にしてください。保存した目的が分からない場合は、無理に決めず「未分類・要確認」にしてください。
    分類が2つ考えられる場合は、両方を候補として示してください。
    出力は「画像番号/分類候補/理由/確認したいこと」の形にしてください。
    画像にない情報を推測で補わないでください。画像の削除や移動は行わず、分類の提案だけをしてください。

    要点は3つです。1つ目は、目的が分からないときに「未分類・要確認」を正常な答えとして認めること。2つ目は、理由を添えさせて、画像にない情報を根拠にしていないか人が確かめられるようにすること。3つ目は、削除や移動はさせず、提案だけに留めることです。

    5 自分のスクショで試す手順

    • まず1枚で試す:いきなり大量に送らず、1枚で分類の出方を確認してから進めます

    • 小さいまとまりで進める:10〜20枚程度の小さいバッチから始めます。チャットAI方式は、何百枚も一気に処理する使い方には向きません

    • 候補を受け取ったら、本人が確定する:AIの分類は候補です。「なぜ撮ったか」を思い出して、入れる場所を自分で決めます。迷ったものは「未分類・要確認」のまま残して構いません

    • 削除候補は、その場で消さない:候補の表示と削除の実行は分けます。あとで必要になる画面もあるので、時間を置いてから本人が判断します

    • 分類のあとは別操作が要る:AIは分類の提案までです。アルバムへの移動や保存は、写真アプリ側で自分で行います

    6 注意点とまとめ

    スクショには個人情報・金銭情報が写りやすいので、AIへ送る前の確認が要ります。

    • 残高、QRコード、予約番号、身分証、認証コード(OTP)が写ったスクショは送らない。QRコードや認証コードは、読み取れるだけで悪用されることがあります

    • 機密情報が含まれる場合は、塗りつぶして済ませようとせず、アップロード自体を避ける。塗りつぶした画像でも、元画像や編集履歴に情報が残っていないか確認する

    • 他人のスクショは送らない。自分のスクショでも、店名と日時だけで行動の記録になることに注意する

    • AIサービスごとに、送った画像の保存・学習利用・削除の設定が違う。使う前に、そのサービスの設定を確認する

    専用アプリとの違いを最後にまとめます。専用アプリには、端末の中で自動で分類するなど、整理に特化した機能があります。チャットAI方式の特徴は、自分で決めた分類基準を文章で伝え、分類の理由を確認しながら進められることです。どちらが優れているという話ではなく、たまった枚数と、理由まで確かめたいかどうかで使い分けます。

    実測を踏まえて、手順をまとめます。分類は「なぜ撮ったか」で6つに分け、決められないものは「未分類・要確認」にする。AIには候補と理由だけを出させ、確定と削除は本人が決める。送る前に、写ってはいけない情報がないか確認する。この形は、今回の実測でも概ね守られました。ただし、注意点も見えました。削除候補はAIからは出にくく(設定画面では両AIとも一度も出ませんでした)、同じAIでも回によって候補が変わることがあります。削除候補を出さなかったのは、失敗というより、画像だけで不要と決めない安全側の振る舞いでもありました。AIの分類は「その時点の候補」として受け取り、最後は本人が目的を思い出して確定する。その前提で使うのが現実的です。

    出典(2026年11月18日に確認)

    • スクショ整理アプリKeepNest 公式ガイド「スクショ整理の方法」(カテゴリは5〜6個まで、「なぜ撮ったか」で分ける考え方。2026年10月25日更新)https://keepnest.roughzone.tw/ja/guides/organize-screenshots

    • Google フォト ヘルプ「ドキュメントを便利なアルバムに振り分ける」

    • Reminari「iPhone向けスクショ整理アプリ比較」(2026年10月14日、iPhone写真アプリの機能範囲)

    次に読むなら

    画像をAIに読ませる作業は、レシートでも同じ考え方が使えます。読み取りの正しさを合計で確かめる方法を書きました。

    レシートをAIに読ませて家計メモを作る。読み取りの正しさは、合計で確かめる
    https://note.com/fuminoto_note/n/n1ceca02bf3a5




     
     
    AIを仕事に使ってみたい方、数字で読む歴史や暮らしの比較に関心のある方へ。AIを活用して記事を企画・制作しています。仕事に役立つ実務ノウハウ、歴史・教養の読み物、暮らしの比較などを発信中。体験談ではなく、調べた事実を丁寧に整理してお届けします。掲載内容は公開前に確認しています。

    あなたへのおすすめ