国内刊号:51-1307/TP
国际刊号:1001-9081
发布日期:
作者:李力铤, 华蓓, 贺若舟, 徐况
单位:1.中国科学技术大学 计算机科学与技术学院,合肥 230027;2.科大国创软件股份有限公司,合肥 230088
关键词:多变量时序预测,自注意力机制,模式关联,时间关联,嵌入机制
基金:国家重点研发计划(2018AAA0101200)
针对多变量时序预测难以充分利用序列上下文语义信息及变量间隐含关联信息的问题,提出一种基于解耦注意力机制的多变量时序预测模型Decformer。首先,提出一种解耦注意力机制,从而充分利用嵌入的语义信息提升注意力权值分配的准确度;其次,提出一种不依赖于显式变量关系的模式关联挖掘方法,以挖掘并利用变量间隐含的模式关联信息。在话务量、电力消耗和交通3种不同类型的真实数据集(TTV、ECL和PeMS-Bay)上,与长短期时间序列网络(LSTNet)、Transformer、FEDformer等优秀的开源多变量时序预测模型相比,Decformer在所有预测时间长度上都取得了最高的预测精度。相较于LSTNet,Decformer在TTV、ECL和PeMS-Bay数据集上的平均绝对误差(MAE)分别降低了17.73%~27.32%、10.89%~17.01%和13.03%~19.64%;均方误差(MSE)分别降低了23.53%~58.96%、16.36%~23.56%和15.91%~26.30%。实验结果表明,Decformer能够有效提升多变量时序预测的精度。
来源:2024年第9期
《计算机应用》期刊编辑部