在数据集上通过聚类实现特征降维

分享一个通过聚类算法对数据特征进行聚类从而实现降维的代码

python 复制代码
import numpy as np
from sklearn import datasets, cluster
digits = datasets.load_digits()
images = digits.images
X = np.reshape(images, (len(images), -1))
agglo = cluster.FeatureAgglomeration(n_clusters=32)
agglo.fit(X)
FeatureAgglomeration(n_clusters=32)
X_reduced = agglo.transform(X)
X_reduced.shape

以下是代码讲解:

1.导入numpy库和机器学习库的数据集、聚类算法模块

python 复制代码
import numpy as np
from sklearn import datasets, cluster

2.加载手写数字数据集

python 复制代码
digits = datasets.load_digits()

这行代码从 sklearn.datasets 模块中加载了手写数字数据集,该数据集包含8x8像素的灰度图像和对应的标签(0到9)。

3.获取图像数据

python 复制代码
images = digits.images

digits.images 是一个形状为 (1797, 8, 8) 的数组,其中 1797 是样本数量,每个样本是一个 8x8 的灰度图像。

4.将图像数据重塑为二维数组

python 复制代码
X = np.reshape(images, (len(images), -1))

这行代码将每个 8x8 的图像展平成一个长度为64的一维向量,因此 X 的形状变为 (1797, 64)。

5.创建并拟合 FeatureAgglomeration 对象

python 复制代码
agglo = cluster.FeatureAgglomeration(n_clusters=32)
agglo.fit(X)

这里创建了一个 FeatureAgglomeration 对象,指定要生成的特征数为32。然后使用 fit 方法在数据 X 上训练这个模型。

6.转换数据以减少特征维度

python 复制代码
X_reduced = agglo.transform(X)

这行代码使用训练好的 FeatureAgglomeration 模型将原始数据 X 转换为一个具有32个特征的新数据集 X_reduced。

7.查看转换后的数据形状

python 复制代码
X_reduced.shape

这行代码输出 X_reduced 的形状。由于我们指定了 n_clusters=32,所以 X_reduced 的形状应该是 (1797, 32),即有1797个样本,每个样本有32个特征。

由此将手写数字图像数据从64维降到32维,通过特征聚合的方法实现降维。

可以在自己的数据集上试试~!

相关推荐
CS创新实验室1 小时前
《机器学习数学基础》补充资料:连续正态分布随机变量的熵
人工智能·机器学习·概率论·机器学习数学基础
幻想趾于现实1 小时前
VisionPro、VisionMaster 多模板匹配分类(大球刀、小球刀、尖刀、三角刀)
开发语言·图像处理·机器学习·visionmaster·visionpro
灰灰学姐2 小时前
yolov8训练模型、测试视频
python·yolo·机器学习
代码骑士3 小时前
决策树(Decision Tree)基础知识
算法·决策树·机器学习
好多渔鱼好多4 小时前
【大模型学习】第八章 深入理解机器学习技术细节
人工智能·机器学习·ai·大模型
Y1nhl4 小时前
数据挖掘校招面经二
人工智能·python·深度学习·算法·机器学习·数据挖掘
人类群星闪耀时5 小时前
从数据中挖掘洞见:初探数据挖掘的艺术与科学
人工智能·数据挖掘
骇客野人5 小时前
人工智能】数据挖掘与应用题库(401-500)
人工智能·数据挖掘
浪九天5 小时前
人工智能直通车系列02【Python 基础与数学基础】(控制流线性代数:向量基本概念)
人工智能·python·深度学习·机器学习
IT古董6 小时前
【漫话机器学习系列】119.小批量随机梯度方法
人工智能·机器学习