项目实战-神经网络预测

一、环境配置与工具导入,

配置中文显示,固定随机种子,生成固定的随机数(,为了让代码每次运行的结果都一样,因为模型初始化权重初始化时随机的,如果不固定种子,同一份代码跑两次,会出现两个精度不一样的模型,调参的时候就不知道数据的变动是因为参数的改变还是因为模型的随机,导致归因困难,固定了随机种子,就相当于与有了一个对照组,排除了随机因素的干扰,确定模型的结果变动是因为参数的变动,最终的目的是让模型的结果跟随参数的变动而变动,而不是跟着模型的初始化随机权重变动而变动)

二、数据加载与初步观察,

1.读取数据,按照业务需求进行筛选

2.查看数据类型,缺失值,查看平均数,最大数,最小数,四分位数,快速了解数据是问么分布的,有没有极端值,整体的是销量水平怎么样,对数据有一个初步的认识

三、数据清洗与数据预处理

1.查看维度

2.类型转换

提取年,月,日,星期几,是否周末,因为销量往往与时间归路有关

3.筛选数据

4.筛选特征

5.缺失值处理(平均值填充,众数填充)

6.查看最终清晰的数据查看维度

7.根据业务需求进行变化

四、时序数据构造,构造14天的时间窗口把过去14天的特征作为输出x第十五条作为输出Y,生成模型能生成的时序训练数据

五、数据标准化与拆分

把特征缩放到统一范围,避免特征过大影响模型学习

初始化标准化器scaler = StandardScaler() #这个就是标准化把数据在-3到3之间等到当特征数据的范围差异很大时,损失函数的等高线会像一个极扁的椭圆。梯度下降时,参数更新容易在椭圆上 "之" 字形来回震荡,走很多弯路才能收敛。

标准化后,所有特征的尺度一致,损失函数的等高线会更接近圆形。梯度下降就能更直接地朝着最小值的方向走,收敛速度更快,模型也更容易训练到最优状态。

把数据按照时序窗口拆分成样本对。

拆分测试集与训练集,时序序列不能随机拆分

六、transformer搭建与训练

通过函数单间模型结构,用多头注意力捕获时间依赖,然后开始训练,加入了早停和学习率衰减防止过拟合

七、模型评估与未来预测,用测试机计算 SMSE,MAE,R**2来评估模型的好坏,最后用predict_future函数基于最后的14天真实数据滚动预测未来14天的销量

相关推荐
段一凡-华北理工大学7 小时前
工业智能体:从Codex/Claude到项目实战~系列文章05:从“AI助手“到“工业智能体“:能力跃迁与落地范式
人工智能·python·claude·codex·工业智能体·高炉炼铁智能化
岁月宁静9 小时前
什么是 Agent:从"会聊天"到"会做事"
人工智能·python
岁月宁静9 小时前
AI 应用开发工程师简历怎么写:HR 初筛、技术复筛、面试追问,三道关卡各看什么?
人工智能·python·面试
老金带你玩AI10 小时前
全球股市跌麻了:AI在进化,牛马在买单
人工智能
我qq不是4515165211 小时前
WorkBuddy下载体验
人工智能·经验分享·ai·workbuddy
IT_陈寒12 小时前
Redis雪崩把我坑惨了,这是5年经验的教训
前端·人工智能·后端
心祭丫丫12 小时前
【每天一个 Python 小案例17】Python 实现通讯录
开发语言·人工智能·笔记·python·学习
海螺_AIHCC13 小时前
LLM 返回的 JSON 十次坏三次,别急着骂模型——60 行容错解析器先兜住(附可运行代码)
人工智能
露天赏雪13 小时前
第3篇:Sentinel熔断降级实战:大模型接口抖动时的服务兜底方案
java·开发语言·人工智能·spring boot·spring·servlet·sentinel