【Transformer序列预测】Pytorch中构建Transformer对序列进行预测源代码

Python,Pytorch中构建Transformer进行序列预测源程序。包含所有的源代码和数据,程序能够一键运行。此程序是完整的Transformer,即使用了Encoder、Decoder和Embedding所有模块。源程序是用jupyterLab所写,建议分块运行。也整理了.py格式供PyCharm等运行。

工作是进行序列预测,此示例是使用12个值,来预测1个值。

具体工作如下:

1、加载数据。数据为Excel文件,525行,13列。即525个样本,前12列为数据,第13列为预测值(标签)。原序列长度为12,预测步长为1。为了符合Transformer的输入,将原始的1x12序列强行调整为3x4的格式,即序列长度=3,维度=4。这一步对于Transformer非常重要。依次划分70%、10%、20%作为训练集、验证集和测试集。

2、构建Encoder、Decoder类,进而构建Transformer。用summary显示网络结构。

3、训练,计算Loss。

4、测试,计算测试集R2、MAE、RMSE、MAPE,绘图。

注:程序关键部分都有注释,有基础的话容易替换数据,可替换任意长度数据。可有偿帮忙替换数据。原程序跑不通可远程帮忙调通。

整理不易,价格低廉,唯一渠道为闲鱼售卖,价格19元。近来有许多用户盗版本人程序,私聊后还拒不承认。。。因此本程序已于2024.12.04在淘天知识产权进行了备案,如有盗版将追究。

【闲鱼链接】:https://m.tb.cn/h.TWN65OE?tk=cweO3FAVwan CZ001

如果链接失效,可在闲鱼搜索:耐心的等待5283 ,然后点"用户"即可找到个人主页下的程序。

相关推荐
碧海银沙音频科技研究院4 小时前
1-1杰理蓝牙SOC的UI配置开发方法
人工智能·深度学习·算法
龙文浩_6 小时前
AI梯度下降与PyTorch张量操作技术指南
人工智能·pytorch·python·深度学习·神经网络·机器学习·自然语言处理
清空mega7 小时前
动手学深度学习——样式迁移
人工智能·深度学习
MRDONG18 小时前
Prompt Engineering进阶指南
人工智能·深度学习·神经网络·机器学习·自然语言处理
QQ676580088 小时前
基于深度学习YOLO的苹果采摘点图像识别 苹果枝条分割识别 苹果分割检测 苹果茎叶分割识别 果园自动化采摘设备目标识别算法第10386期
深度学习·yolo·自动化·苹果采摘点图像·苹果枝条分割·苹果茎叶分割·果园自动化采摘设备
code_pgf8 小时前
Mamba-2 / Jamba / DeepSeek-V2 高效架构
架构·transformer
碧海银沙音频科技研究院8 小时前
虚拟机ubuntu与windows共享文件夹(Samba共享)解决WSL加载SI工程满卡问题
人工智能·深度学习·算法
小江的记录本9 小时前
【Transformer架构】Transformer架构核心知识体系(包括自注意力机制、多头注意力、Encoder-Decoder结构)
java·人工智能·后端·python·深度学习·架构·transformer
AI先驱体验官9 小时前
债小白分析:债务优化服务的新变量、AI能否带来行业升级
大数据·人工智能·深度学习·重构·aigc
SomeB1oody9 小时前
【Python深度学习】2.1. 卷积神经网络(CNN)模型理论(基础):卷积运算、池化、ReLU函数
开发语言·人工智能·python·深度学习·机器学习·cnn