sklearn 基础教程

scikit-learn(简称sklearn)是一个开源的机器学习库,它提供了简单和有效的数据分析和数据挖掘工具。sklearn是Python语言中最重要的机器学习库之一,广泛用于统计学习和数据分析。

以下是scikit-learn的基础教程,帮助您开始使用这个强大的工具。

安装

在开始之前,您需要确保已经安装了Python和pip。然后,您可以使用pip来安装scikit-learn

bash 复制代码
pip install -U scikit-learn

数据集

scikit-learn提供了一系列的数据集,供您在学习和测试时使用。例如,著名的鸢尾花数据集(Iris dataset):

python 复制代码
from sklearn.datasets import load_iris
iris = load_iris()
data = iris.data
target = iris.target

数据预处理

在训练模型之前,通常需要对数据进行预处理。sklearn.preprocessing模块提供了许多数据预处理工具。

例如,使用StandardScaler对数据进行标准化:

python 复制代码
from sklearn.preprocessing import StandardScaler
scaler = StandardScaler()
data_scaled = scaler.fit_transform(data)

模型训练

scikit-learn提供了大量的机器学习模型,包括分类、回归、聚类等。以下是一个使用支持向量机(SVM)进行分类的例子:

python 复制代码
from sklearn.model_selection import train_test_split
from sklearn.svm import SVC
# 划分训练集和测试集
X_train, X_test, y_train, y_test = train_test_split(data_scaled, target, test_size=0.2, random_state=42)
# 创建SVM分类器
clf = SVC(kernel='linear')
# 训练模型
clf.fit(X_train, y_train)
# 评估模型
score = clf.score(X_test, y_test)
print("模型的准确率:", score)

模型评估

sklearn.metrics模块提供了多种性能评估指标,如准确率、混淆矩阵、F1分数等。

python 复制代码
from sklearn.metrics import classification_report
y_pred = clf.predict(X_test)
print(classification_report(y_test, y_pred))

管道(Pipeline)

scikit-learn提供了Pipeline类,用于将多个步骤封装为一个单一的估计器,这在机器学习工作流中非常有用。

python 复制代码
from sklearn.pipeline import Pipeline
pipeline = Pipeline([
    ('scaler', StandardScaler()),
    ('svm', SVC(kernel='linear'))
])
pipeline.fit(X_train, y_train)
score = pipeline.score(X_test, y_test)
print("管道中模型的准确率:", score)

超参数调整

使用GridSearchCVRandomizedSearchCV进行超参数的网格搜索或随机搜索,以找到最佳的模型参数。

python 复制代码
from sklearn.model_selection import GridSearchCV
param_grid = {'svm__C': [0.1, 1, 10], 'svm__gamma': [1, 0.1, 0.01]}
grid = GridSearchCV(pipeline, param_grid, cv=5)
grid.fit(X_train, y_train)
print("最佳参数:", grid.best_params_)
print("最佳分数:", grid.best_score_)

这只是一个非常基础的介绍,scikit-learn是一个非常庞大和强大的库,提供了许多高级功能。要深入学习,建议查看官方文档和教程,以及参与社区讨论。

相关推荐
阿图灵16 分钟前
OpenCV 算术运算四件套:NOT/AND/OR 位运算与图像混合
图像处理·人工智能·python·opencv·计算机视觉·位运算
边吃番茄边敲代码20 分钟前
企业智能助手Agent 安全测试,包含Prompt Injection 和越权工具调用
人工智能·python·功能测试·ai·单元测试·prompt·模块测试
阿图灵30 分钟前
OpenCV 阈值与模糊:全局/自适应阈值、Canny 边缘检测与三种模糊
图像处理·人工智能·python·opencv·计算机视觉·边缘检测
M78佐菲35 分钟前
Linux学习笔记:进程回收、exec函数簇与线程
linux·笔记·学习·算法
桃西西呀42 分钟前
国内金价破 1000,「涨了多少」和「该买多少」是数学问题
人工智能·python·数据分析
张人玉1 小时前
茶树 NeRF(Neural Radiance Fields,神经辐射场)三维重建与数据分析可视化系统——基于神经辐射场的茶树三维重建方法实现可视化大屏
python·数据挖掘·数据分析·echarts·three.js
脉动数据行情11 小时前
Python WebSocket 国内商品期货|螺纹钢 & 铁矿石实时行情监听
开发语言·python·websocket
商业白皮书1 小时前
用手机怎么拍证件照?光线、机位、姿态和后期制作步骤
笔记
circuitsosk1 小时前
智能体任务拆解与执行:基于ReAct+Plan-and-Execute框架的行业Skill构建实录
前端·javascript·python·react.js·react·llm agent·智能体编排
麻雀飞吧1 小时前
近期量化工具怎么选,先看你卡在哪一环
人工智能·python