数学建模熵权法中信息熵与信息熵冗余度的理解

具体步骤:数学建模------熵权法-腾讯云开发者社区-腾讯云 (tencent.com)

灵感来源:信息熵越大,信息量到底是越大还是越小? - 骚动的白米饭的回答 - 知乎 https://www.zhihu.com/question/274997106/answer/1055696026

信息熵在第二篇博文中有比较好的案例解读。我们在做ABCD选择题的时候,注意的就是选择哪个选项的期望,那么如果我们给小明的建议X,使得小明选择A的概率是1/2,BCD都变成了1/6,那么通过信息熵公式结果1.7bit,那么我们原来至少用2bit来概述选择的可能,2 - 1.7也就是建议X的信息量了,或者是信息收益。那么回到第一个博文中的案例,我们想知道六个科目对于评价学生优秀程度的权重,我们对每个属性纵向求的信息熵和信息熵冗余度如何理解呢?结合选择题来看,有十个学生,十个学生就是十个选项,我们通过语文如何选择这十个学生呢?就比如通过他们的语文成绩,那么语文这一栏的信息熵如何理解呢?信息熵就是实际我们存储选择这个十个学生用到的存储量,那么如果我们通过k将信息熵的值域收缩到0-1的话,那么1-ej其实就是语文对本选择问题的信息量。那么以此类推的话,数学,英语,化学,物理,生物对选择的信息量也就都清楚了,现在再用信息量做权重的话,就有了各属性对整体样本选择的最客观的评价标准。

相关推荐
统计学小王子18 小时前
数学建模国赛倒计时 2 天 ——《统计模型精讲(广义线性模型 R 语言实例 + 分析)》
开发语言·数学建模·r语言
红烧code20 小时前
统计学中的六大估计方法:从最大似然到核密度估计的本质理解
数学建模·概率论
热心网友俣先生20 小时前
2026年高教社杯数模国赛A题:五年命题规律与预测
算法·机器学习·数学建模
2601_953988071 天前
Ricon组态实时监控 - 毫秒级数据可视化
前端·物联网·数学建模·信息可视化·架构·前端框架
统计学小王子1 天前
数学建模国赛倒计时 2 天 ——《缺失值处理一(R语言)》
开发语言·数学建模·r语言
HineMusk1 天前
如何使用 Codex 为数学建模论文高效绘图:以 2023 国赛 C 题为例
数学建模·流程图·画图
乱七八糟的屋子1 天前
NLopt 超详细实战教程(C++版)算法选型|多目标优化|批量寻优|动态约束|闭环仿真控制
数学建模·非线性优化·nlopt·多目标优化·机器人算法·工业仿真·c++优化
统计学小王子1 天前
数学建模国赛倒计时 2 天 ——《异常值的处理(R语言)》
开发语言·数学建模·r语言
建模小刘2 天前
(急急急)2026数学建模国赛最后三天准备!!!!
数学建模·2026数学建模国赛
统计学小王子2 天前
数学建模国赛倒计时 3 天 ——《统计模型精讲(分位数回归R语言实现二)》
数学建模·回归·r语言