数据清洗数据分析数据挖掘.doc

数据清洗 1.基本概念 数据清洗从名字上也看的出就是把脏的洗掉指发现并纠正数据文件中可识别的错误的最后一道程序包括检查数据一致性处理无效值和缺失值等因为中的数据是面向某一主题的数据的集合这些数据从多个业务系统数据仓库中抽取而来而且包含历史数据这样就避免不了有的数据是错误数据有的数据相互之间有冲突这些错误的或有冲突的数据显然是我们不想要的称为脏数我们要按照一定的规则把\洗掉这就是数据清洗而数据清洗