データクレンジング(でーたくれんじんぐ)

詳細解説

複数部門のシステムを統合する際や、データウェアハウスへデータを取り込む前段階などで実施されます。具体的には、全角と半角の混在や住所・法人格の表記ゆれを一定の規則に従って統一する処理、空白となっている欠損値の補完や除外、異常な外れ値の補正などが含まれます。さらに、同一の顧客や商品が別々のレコードとして登録されている場合に、それらを特定して一つに統合する名寄せと組み合わせて行われることも少なくありません。名称から記憶媒体のデータを完全消去するセキュリティ対策と混同されやすいものの、不要なデータを消すだけでなく、不正確な記述を正しい状態に整えてデータの正確性や一貫性を保ち、業務や分析で信頼して使えるようにすることが本来の目的です。