项目实战-神经网络预测

一、环境配置与工具导入,

配置中文显示,固定随机种子,生成固定的随机数(,为了让代码每次运行的结果都一样,因为模型初始化权重初始化时随机的,如果不固定种子,同一份代码跑两次,会出现两个精度不一样的模型,调参的时候就不知道数据的变动是因为参数的改变还是因为模型的随机,导致归因困难,固定了随机种子,就相当于与有了一个对照组,排除了随机因素的干扰,确定模型的结果变动是因为参数的变动,最终的目的是让模型的结果跟随参数的变动而变动,而不是跟着模型的初始化随机权重变动而变动)

二、数据加载与初步观察,

1.读取数据,按照业务需求进行筛选

2.查看数据类型,缺失值,查看平均数,最大数,最小数,四分位数,快速了解数据是问么分布的,有没有极端值,整体的是销量水平怎么样,对数据有一个初步的认识

三、数据清洗与数据预处理

1.查看维度

2.类型转换

提取年,月,日,星期几,是否周末,因为销量往往与时间归路有关

3.筛选数据

4.筛选特征

5.缺失值处理(平均值填充,众数填充)

6.查看最终清晰的数据查看维度

7.根据业务需求进行变化

四、时序数据构造,构造14天的时间窗口把过去14天的特征作为输出x第十五条作为输出Y,生成模型能生成的时序训练数据

五、数据标准化与拆分

把特征缩放到统一范围,避免特征过大影响模型学习

初始化标准化器scaler = StandardScaler() #这个就是标准化把数据在-3到3之间等到当特征数据的范围差异很大时,损失函数的等高线会像一个极扁的椭圆。梯度下降时,参数更新容易在椭圆上 "之" 字形来回震荡,走很多弯路才能收敛。

标准化后,所有特征的尺度一致,损失函数的等高线会更接近圆形。梯度下降就能更直接地朝着最小值的方向走,收敛速度更快,模型也更容易训练到最优状态。

把数据按照时序窗口拆分成样本对。

拆分测试集与训练集,时序序列不能随机拆分

六、transformer搭建与训练

通过函数单间模型结构,用多头注意力捕获时间依赖,然后开始训练,加入了早停和学习率衰减防止过拟合

七、模型评估与未来预测,用测试机计算 SMSE,MAE,R**2来评估模型的好坏,最后用predict_future函数基于最后的14天真实数据滚动预测未来14天的销量

相关推荐
延晗1 分钟前
【从零开始 DeepSeek Harness 插件开发教程】一、DeepSeek Harness 初体验:从零跑通开发者预览
人工智能·deepseek
2401_872418783 分钟前
机器学习绪论
人工智能·深度学习·机器学习
狂潮lister6 分钟前
狂潮·元理论 | 第5篇:想为你的AI培养个性吗!哈哈哈……(6个测试,教你幻觉的正确玩法)
前端·人工智能
禁默7 分钟前
机器人的手,为什么拿个杯子都这么难?一文看懂“灵巧操作“
人工智能·microsoft·机器人
真探AI10 分钟前
8160亿参数开源模型,两台Mac就能跑——本地大模型从折腾党玩具,变成产品选型必须认真算的账
人工智能
树獭哥11 分钟前
Deep Agents 学习笔记(二):虚拟文件系统
人工智能
自养Agent14 分钟前
Agent Harness 从用到会造:大厂 RAG 为什么从不只用向量检索
人工智能·llm
同城验收16 分钟前
本地模型升级后旧提示词全失效——版本与提示词一起钉死怎么验收
人工智能
真探AI17 分钟前
AI Agent 进企业微信,银行却在关大门——当「代办」撞上「责任边界」,产品经理该怎么重新划线
人工智能
xsd2024111817 分钟前
无人机工厂巡检落地全手册:机巢硬件安装 · AI 算法 · 系统设计 · 部署调试
人工智能