(1.17)--5.5数据变换大数据分析与挖掘.ppt

《(1.17)--5.5数据变换大数据分析与挖掘.ppt》由会员分享，可在线阅读，更多相关《(1.17)--5.5数据变换大数据分析与挖掘.ppt（7页珍藏版）》请在淘文阁 - 分享文档赚钱的网站上搜索。

1、数据预处理BIG DATABIG DATA大数据，成就大未来！BIG DATABIG DATA1 数据预处理概述2 数据清理3 数据集成4 数据归约5 数据变换大数据，成就大未来！5 数据变换数据预处理5.1 数据变换策略概述数据变换将数据转换或统一成适合挖掘的形式平滑：去除数据中的噪声，分箱、回归、聚类属性/特征构造：由给定属性构造的新属性并添加到属性集中聚集：汇总，数据立方体的构建规范化：把属性数据按比例缩放，使之落入一个特定的小区间I.最小-最大规范化II.z-score规范化III.小数定标规范化离散化：数值属性的原始值用区间标签或概念标签替换。大数据，成就大未来！5 数据变换数据预处

2、理5.2 通过规范化变换数据最小-最大规范化例：假设属性income的最小值与最大值分别为12000美元和98000美元。我们想把income映射到0.0,1.0。根据最小-最大规范化，income的值为73600美元时将变换为多少？大数据，成就大未来！5 数据变换数据预处理5.2 通过规范化变换数据z-score规范化例：假设属性income的均值和标准差分别为54000美元和16000美元。根据z-score规范化，income的值为73600美元时将变换为多少？大数据，成就大未来！5 数据变换数据预处理5.2 通过规范化变换数据小数定标规范化其中 j 是使得max(|)1的最小整数.例：假设属性A的取值由-986到917。A的最大绝对值为986.根据小数定标规范化，我们用1000(j=3)除以每一个值。因此，-986被规范化为-0.986，917被规范化为0.917.BIG DATABIG DATA感谢您的观看！