数据降维与K-均值聚类的质量评估

摘要

聚类分析在大数据时代应用广泛，但缺乏直观评价聚类质量的有效方法。为此，提出一种具有数据降维和搜寻数据固有聚类数量的处理模式。在数据散射矩阵基础上构造一个增广矩阵，利用线性辨别分析将高维数据变换到最具辨别性的低维特征子空间以实现数据降维。为解决分区聚类算法的随机初始化问题，提出最小-最大规则，避免出现空聚类并确保数据的可分性。对于聚类的结果，计算每个聚类的轮廓系数，通过比较轮廓的尺寸以评价不同聚类数量情况下的聚类质量。对K-均值算法的仿真结果说明，这种处理模式不仅能够可视化确定未知数据所固有的聚类数量，而且能为高维数据提供有效的分析方法。

关键词

聚类质量 / 散射矩阵 / 线性辨别分析 / 最小-最大规则 / 轮廓分析

基金资助

广东省普通高校重点领域专项(2021ZDZX1035);; 广东省教育厅特色创新项目(2022KTSCX64)