今天给大家介绍一个超强大的深度学习模型:CNN-LSTM-Attention!
这个模型结合了三种不同类型的神经网络架构,充分挖掘了数据中的空间和时间信息,不仅能捕捉数据的局部特征和长期依赖关系,还可以自动关注输入数据中最重要的部分,在提高预测准确性和鲁棒性方面起到了非常重要的作用。
因此它也是解决时间序列预测和其他序列数据处理任务的首选,关于它的研究在各大顶会上热度飞升,比如分类准确率近100%的CBLA模型等。
如果有论文er感兴趣,需要这方面的参考以便找idea,我这边也提供9篇CNN-LSTM-Attention最新论文,开源的代码都附上了,希望可以给各位的论文添砖加瓦。
扫码添加小享,回复“三结合”
免费获取全部论文+开源代码
AdeepLSTM-CNNbasedonself-attention mechanism with input data reduction for short-term load forecasting
方法:论文介绍了一个深度学习模型,该模型基于长短期记忆网络、卷积神经网络以及自注意力机制(self-attention mechanism,简称SAM)来进行短期负荷预测(STLF)。实验证明该模型在减少输入数据的同时提升了预测精度,且优于传统基准模型超过10%。
创新点:
首次在短期负荷预测(STLF)中采用LSTM-CNN结合的SAM模型。 通过仅使用负荷数据,实现一种基于输出维度的混合预测框架。 创新性地使用卷积核来提取用户的随机性,解决非平稳特性问题。
Prediction of Remaining Useful Life of Aero‑engines Based on CNN‑LSTM‑Attention
方法:论文介绍了一个结合了卷积神经网络、长短期记忆网络和注意力机制的预测方法,用于预测航空发动机的剩余使用寿命(RUL)。模型首先使用CNN提取输入数据的特征,然后将提取的数据输入到LSTM网络模型中,最后通过加入注意力机制来预测航空发动机的RUL。
创新点:
提出了一种创新的组合预测方法,整合了卷积神经网络、长短期记忆网络和自注意力机制,用于更准确地预测航空发动机的剩余使用寿命(RUL)。 在CNN-LSTM模型中引入了自注意力机制,使得LSTM组件在最终预测中更关注由CNN重构的特征中的重要部分。
扫码添加小享,回复“三结合”
免费获取全部论文+开源代码
Attention-based CNN-LSTM and XGBoost hybrid model for stock prediction
方法:本文提出了一种基于注意力机制的CNN-LSTM和XGBoost混合模型,用于预测中国股市股票价格,通过整合ARIMA模型和神经网络的非线性关系,解决传统时序模型难以捕捉非线性的问题,提高预测准确性,帮助投资者实现收益增长和风险规避。
创新点:
提出了一种结合注意力机制的CNN-LSTM和XGBoost的混合模型,显著提高了股票价格预测的准确性。 采用预训练-微调框架,先通过Attention-based CNN-LSTM模型提取原始股票数据的深层特征,再利用XGBoost模型进行微调。 使用ARIMA模型对股票数据进行预处理,然后将经过预处理的数据输入神经网络或XGBoost进行分析。
Machine Fault Detection Using a Hybrid CNN-LSTM Attention-Based Model
方法:论文提出了一个混合卷积神经网络(CNN)和长短期记忆网络(LSTM)加上注意力机制(Attention)的模型来检测电机故障。这个混合模型通过时间序列分析来预测电机可能出现的异常,从而实现对电机故障的预测性维护。
创新点:
提出了结合LSTM和CNN的混合架构,并引入注意力机制和门控残差网络(GRN),显著提高了时间序列预测的准确性,特别是在预测极端事件时表现优异。 在网络输出端应用分位数回归,以处理数据中存在的不确定性。 采用经验小波变换(EWT)和Savitzky-Golay滤波器,以减少信号中的噪声并提取相关特征。
扫码添加小享,回复“三结合”
免费获取全部论文+开源代码