数学建模—分类模型

本讲将介绍分类模型。对于而分类模型,我们将介绍逻辑回归(logistic regression)和Fisher线性判别分析两种分类算法;对于多分类模型,我们将简单介绍Spss中的多分类线性判别分析和多分类逻辑回归的操作步骤下。

本题按水果分类的例子

思路:逻辑回归原始现象

  1. 设置虚拟变量y
  2. 进行回归,估计出来的y-hat于虚拟变量中哪个更接近则分类为那个。

Eg:设1苹果,2橙子 若y与1接近为苹果,与0近为橙子

数据预处理生成虚拟变量

自变量mass重量,width水果宽度,height水果高度,color_score颜色(0-1)

因变量:fruit_name水果名

生成虚拟变量操作:转换->创建虚拟变量

3.逻辑回归:

4.建立模型:

不难看出u与x有相关性所以存在内生性,导致得到的数据不准确,所以需要进行改进。

解决内生性的方法:两点分布

连接函数的取法

这两个公式由图得出两个模型都符合x属于(-∞,+∞)y属于(0,1)

如何求解?

将自变量代入式子得到y与0.5对比(本题按0.5对比是水果案例)

极大似然估计能够估计粗B_hat再推出y_hat最后预测。

怎么用于分类?

这里我们选择第二个方程e^X/1+e^x

SPSS求解二元逻辑回归:

逻辑回归系数表:

假如自变量有分类变量怎么办?

预测结果较差怎么办?

负面影响:

增加平方自变量过于让拟合线完全贴近样本数据,导致预测数据不吻合。

如何确定合适的模型?(既使得样本数据符合,也使得预测数据更加可靠)

这里我们把苹果和橙子都剔除三个再对比

Fisher线性判断别分析

核心问题:找到系数向量w

SPSS操作:

多分类问题:

Fisher判断多分类

1.设置好分类数量

2.摘要表

3.保存中:预测组成员+组员概率

Fisher多分类判别结果结果:

Logistic多分类判别:

Spss操作:

分析->回归->多元Logistic

统计中:选择分类其余可看自己是否需要选择

保存中选择:估算响应概率,预测类。

结果:

课后作业:

解答:

为了方便能进行多元分类,我们需要自定义类别的名称,如将变色鸢尾为1,山鸢尾为2,维吉尼亚鸢尾为3.

博主选择了Logistic多元分类:

但是为了防止样本数据或预测数据的不准确性,我们将数据分为训练组和测试组,最后得到的分类结果。

预测结果:

相关推荐
菜鸟~noob2335 小时前
【电子战】第20篇:凸优化与对数障碍法【含matlab代码】
开发语言·matlab
DongQiShanRen6 小时前
裁决台账双向互校(上):名册与实物的第一道对账
java·linux·运维·数据库·人工智能·自然语言处理·数据挖掘
Evand J8 小时前
【电机滤波例程1】PMSM永磁同步电机转速与位置估计,MATLAB程序:标准无迹卡尔曼滤波、模型说明与仿真验证
算法·matlab·电机·ekf·负载·卡尔曼滤波
Evand J9 小时前
【电机滤波例程2】负载转矩增广扩展卡尔曼滤波(EKF)原理与MATLAB例程:五维PMSM状态与负载阶跃估计。订阅专栏后可查看完整代码
开发语言·matlab·电机·ekf·卡尔曼滤波
howdoyoudo20260611 小时前
当新案例冲击旧框架:分类系统的宿命与修正路径
大数据·网络·数据库·人工智能·安全·ai·分类
β添砖java11 小时前
机器学习8:数据挖掘案例-南方电网电力负荷预测 ---完结!
人工智能·机器学习·数据挖掘
weixin_3077791317 小时前
C++代码实现MATLAB中的dlarray函数功能
开发语言·c++·算法·matlab
计算机毕业设计杰瑞1 天前
【最新原创大数据】基于大数据的酒店数据分析与可视化,附源码_高质量项目_可视化_数据分析_毕设选题推荐_SPark_Hadoop_毕设指导
大数据·信息可视化·数据挖掘·课程设计
Evand J1 天前
【MATLAB例程】三维RRT+APF路径规划与AOA-TDOA融合定位算法。附代码的下载链接
算法·matlab·路径规划·rrt·tdoa·apf·aoa
weixin_382395231 天前
本地部署 ERP 选型记录:从 Excel 到轻量系统的这几年
数据库·人工智能·数据挖掘