メインコンテンツへスキップ
見出し画像

Excel・CSV自動化で止まりやすい5つの原因|欠損・重複・型違いをどう扱う?

    ExcelやCSVの自動化は、一度動くと非常に便利です。

    毎月の集計。
    顧客データの整理。
    売上レポート。
    問い合わせ一覧。
    商品データの更新。

    ところが、最初のテストでは動いたのに、実際に運用を始めると突然止まることがあります。

    原因は、コードや関数そのものではなく、入力データの変化であることが少なくありません。

    特に注意したいのが、

    1. 欠損

    2. 重複

    3. 型違い

    4. 列構造の変化

    5. 文字や表記の揺れ

    です。

    1|欠損

    必要な項目が空欄になっている状態です。

    たとえば、

    注文ID商品金額A001商品A5,000A002商品BA003商品C3,000

    金額が空欄の場合、

    0円として扱うのか。

    処理対象外にするのか。

    担当者へ確認するのか。

    ルールが必要です。

    空欄を自動的に0へ変換すると、実際には入力漏れだった場合に売上が間違います。

    空欄=0とは限りません。

    2|重複

    同じデータが複数回入っている状態です。

    注文IDが同じ行を2回集計すれば、売上が二重計上されます。

    重複を削除する場合も、

    「どの列が同じなら重複なのか」

    を決める必要があります。

    顧客名が同じだけでは、別の注文かもしれません。

    注文ID+商品ID+日付など、業務に合ったキーを決めます。

    3|型違い

    数字に見えても、データ上は文字列になっていることがあります。

    たとえば、

    5000

    と

    "5000"

    は、処理方法によって別のものとして扱われます。

    日付も、

    • 2026/10/31

    • 2026-10-31

    • 10月31日

    • 31/10/2026

    のように複数形式があります。

    見た目が同じでも、内部形式が違えば処理が止まります。

    4|列構造の変化

    昨日まで、

    注文ID / 商品 / 金額

    だったファイルが、

    注文ID / 顧客名 / 商品 / 金額

    に変わる。

    列が追加されただけで処理位置がずれる仕組みは、運用に弱くなります。

    「3列目を取得」ではなく、

    「金額」という列名を取得

    する方が変更に強い場合があります。

    ただし列名自体が変更される可能性も考える必要があります。

    5|表記の揺れ

    同じ意味でも、

    • 東京都

    • 東京

    • Tokyo

    のように表記が違うことがあります。

    商品名でも、

    • 商品A

    • 商品A

    • 商品A(新)

    • 商品A 

    などの違いがあります。

    人間なら同じと判断できても、システムには別データです。

    必要なら処理前に正規化します。

    「全部自動修正」は危険

    異常データを見つけたからといって、何でも自動で直せばよいわけではありません。

    安全なのは、

    自動修正できるもの
    と
    人が確認するもの

    を分けることです。

    たとえば、

    前後空白を削除
    → 自動修正

    注文IDがない
    → 保留

    金額が文字列
    → 数値変換できれば自動修正

    金額そのものが空欄
    → 人へ確認

    という形です。

    異常データは「別に残す」

    処理できないデータを削除してはいけません。

    おすすめは、

    正常
    と
    保留

    へ分ける方法です。

    正常な98件は自動処理。

    異常な2件だけ人が確認。

    これなら100件すべてを見る必要がありません。

    無料記事では「原因」まで。講座では「処理ルール」まで。

    この記事では、Excel・CSV処理で起きやすい代表的な問題を紹介しました。

    第3部の教材では、

    • 正常条件

    • 欠損ルール

    • 重複判定

    • 型変換

    • データ正規化

    • エラー処理

    • 保留フロー

    • 照合方法

    を、実際に使える形へ落とし込みます。

    異常がない前提ではなく、異常が起きても回る処理を作る。

    ここが実務自動化では重要です。

    ▶ ミナト講座

    ▶ ミナト実装ラボ

    #Excel #CSV #データ処理 #自動化 #業務効率化 #業務改善 #DX #Python

    あなたへのおすすめ