期刊文献+
共找到5篇文章
< 1 >
每页显示 20 50 100
基于注意力Seq2Seq模型的终端区航空器航迹预测 被引量:3
1
作者 卢婷婷 刘博 李纯柱 《科学技术与工程》 北大核心 2024年第9期3882-3895,共14页
为充分挖掘机场终端区航空器航迹时间依赖性,解决中长期、多步长航迹预测精度不稳定的问题,引入注意力机制(attention mechanism)和教师监督(teacher forcing)中的指数衰减(exponential decay)采样方法,提出了一种基于序列到序列框架的... 为充分挖掘机场终端区航空器航迹时间依赖性,解决中长期、多步长航迹预测精度不稳定的问题,引入注意力机制(attention mechanism)和教师监督(teacher forcing)中的指数衰减(exponential decay)采样方法,提出了一种基于序列到序列框架的机场终端区航迹预测模型(Seq2Seq-attention mechanism-exponential decay,SAE)。序列到序列框架实现了多步长预测,注意力机制提高解码器预测精度,指数衰减采样方法加速了训练阶段模型收敛,在一定程度上提高了模型的泛化性。最后,为了验证提出方法的有效性,利用天津终端区28架次、90 d ADS-B航迹数据构建原始数据集,以平均绝对误差(mean squared error,MAE)和均方根误差(root mean squared error,RMSE)作为模型性能评价指标,进行了航迹预测实验,实验结果表明:高度、经度和纬度在序列到序列框架中的循环神经网络分别采用LSTM、GRU和LSTM可以获得最好预测性能;以4种预测长度1、3、5和10 min进行建模,与基线模型中预测性能最好的结果比较,所提出方法在验证集上的高度、经度和纬度指标表现最优,10 min预测窗口下的平均绝对误差分别降低了66.30%、54.62%和36.59%,均方根误差分别降低了65.45%、38.16%和20.57%,同时,上述4种预测时长下所提出方法预测结果的均值和方差最小,表明随着预测时长的增加,模型预测结果的稳定性最好。此外,引入的注意力机制与指数衰减采样方法对有效捕捉航迹时间依赖性、提高模型泛化性均具有积极的贡献。 展开更多
关键词 航空运输 航迹预测 终端区 序列到序列框架 注意力机制
在线阅读 下载PDF
基于神经网络的文本风格转换
2
作者 郝志峰 陈渝升 +2 位作者 蔡瑞初 温雯 王丽娟 《计算机科学与应用》 2020年第10期1888-1899,共12页
文本风格转换在书面创作、品牌推广等许多方面具有良好的应用前景,近年来也逐渐成为研究热点。现有的文本转换工作对风格表示简单,无法适应文本风格差异较大的场景。本文提出一种基于注意力机制的风格表示方法,增加风格特征携带的信息... 文本风格转换在书面创作、品牌推广等许多方面具有良好的应用前景,近年来也逐渐成为研究热点。现有的文本转换工作对风格表示简单,无法适应文本风格差异较大的场景。本文提出一种基于注意力机制的风格表示方法,增加风格特征携带的信息量。文本的文本风格转换模型包括以下步骤:首先对输入句子的词序列与词性序列进行向量化,之后经过两个Bi-LSTM编码器分别计算文本的内容与风格特征序列,将内容序列作用于LSTM解码器生成词汇,而风格序列则经过本文提出的风格调整方法,对输出的词汇概率进行调整,最终输出为指定风格的句子。实验结果表明,对于不同类型的数据,模型的转换准确率与内容保存程度均有更好表现。 展开更多
关键词 长短期记忆循环神经网络 文本风格转换 注意力机制 序列到序列框架 文本生成
在线阅读 下载PDF
基于循环神经网络的对话系统记忆机制 被引量:6
3
作者 易炜 何嘉 邹茂扬 《计算机工程与设计》 北大核心 2019年第11期3259-3264,共6页
针对基于循环神经网络(recurrent neural network,RNN)的对话系统缺乏上下文记忆能力的问题,提出一种带有额外记忆能力模块的深度学习模型。以序列到序列框架为基础,增加一个基于双向循环神经网络(Bi-directional RNN)和全连接神经网络... 针对基于循环神经网络(recurrent neural network,RNN)的对话系统缺乏上下文记忆能力的问题,提出一种带有额外记忆能力模块的深度学习模型。以序列到序列框架为基础,增加一个基于双向循环神经网络(Bi-directional RNN)和全连接神经网络的记忆选择模块。通过把当前对话和上下文输入到记忆选择模块中得到一个选择值,比较选择值与阈值决定是否把上下文语句也加入到当前对话的序列到序列结构的编码端,使模型在需要使用上下文信息的时候可以选择性地获取,使得模型具备记忆能力。实验结果表明,使用相同的语料库进行训练,加入了记忆能力模块的模型相比没有记忆能力的模型明显具备了结合上下文的记忆能力,可以生成更准确的回复。 展开更多
关键词 对话系统 记忆机制 序列到序列框架 循环神经网络 双向循环神经网络
在线阅读 下载PDF
DAPC:结合双注意力和指针覆盖的文本摘要模型 被引量:7
4
作者 张敏 曾碧卿 +1 位作者 韩旭丽 徐如阳 《计算机工程与应用》 CSCD 北大核心 2020年第8期149-157,共9页
基于注意力机制的序列到序列模型在生成式摘要方法中得到广泛应用,并取得较好的表现。但现有模型方法生成的摘要普遍存在语义无关、句内重复和未登录词等问题。为了解决这些问题,在典型基于注意力机制的序列到序列模型基础上,提出了结... 基于注意力机制的序列到序列模型在生成式摘要方法中得到广泛应用,并取得较好的表现。但现有模型方法生成的摘要普遍存在语义无关、句内重复和未登录词等问题。为了解决这些问题,在典型基于注意力机制的序列到序列模型基础上,提出了结合双注意力和指针覆盖机制的生成式文本摘要方法DAPC(Dual Attention and Pointer-Coverage based model)模型。组合局部注意力和卷积神经网络,提取输入文本的更高层次的语言特征;引入指针-生成网络来解决未登录词问题;使用覆盖机制解决模型生成摘要句内重复的问题。实验结果表明,模型在CNN/Daily Mail数据集中有较好的表现。 展开更多
关键词 生成式文本摘要 局部注意力 序列到序列框架 覆盖机制
在线阅读 下载PDF
基于深度学习的稠油蒸汽驱汽窜时间预测方法 被引量:1
5
作者 崔传智 陆水青山 +2 位作者 吴忠维 盖平原 刘廷峰 《深圳大学学报(理工版)》 CAS CSCD 北大核心 2023年第5期622-630,共9页
实时可靠的汽窜时间预测方法可以为及时采取防治措施提供支持.结合深度学习算法以及油井自身动态数据的约束,提出一种预测稠油井汽窜时间的新方法.针对单一指标波动频繁,噪声大,以及无法准确表征汽窜时间等问题,根据油田实际注采数据,... 实时可靠的汽窜时间预测方法可以为及时采取防治措施提供支持.结合深度学习算法以及油井自身动态数据的约束,提出一种预测稠油井汽窜时间的新方法.针对单一指标波动频繁,噪声大,以及无法准确表征汽窜时间等问题,根据油田实际注采数据,以参数组合的方式构建表征蒸汽窜流通道形成时间的指标参数,并结合变异系数-G1混合交叉赋权法融合成汽窜综合判识曲线.基于标准互信息的相似性度量方法选择合适的时间序列数据作为输入特征,以相应的汽窜综合判识曲线作为输出时间序列构建学习样本.采用序列到序列深度学习框架建立汽窜时间的预测模型进行实际预测,并与传统的机器学习方法进行对比,验证模型的有效性和优越性.该方法通过数据驱动的方式模拟了注采时间序列特征与汽窜判识曲线之间的映射关系,可有效提高汽窜时间预测的效率和精度,对汽窜智能预警具有一定指导意义. 展开更多
关键词 油藏工程 稠油油藏 汽窜判识 汽窜时间预测 自然语言处理 序列到序列深度学习框架
在线阅读 下载PDF
上一页 1 下一页 到第
使用帮助 返回顶部