期刊文献+
共找到64篇文章
< 1 2 4 >
每页显示 20 50 100
考虑温度模糊化的多层长短时记忆神经网络短期负荷预测 被引量:27
1
作者 郑瑞骁 张姝 +1 位作者 肖先勇 汪颖 《电力自动化设备》 EI CSCD 北大核心 2020年第10期181-186,共6页
智能电表的普及为短期负荷预测提供了海量数据,使得负荷精细化预测成为可能,而温度是影响夏季负荷的重要因素。提出一种考虑温度模糊化的多层长短时记忆神经网络(ML-LSTM)短期负荷预测方法。利用隶属度函数将预测时刻的温度和当日的平... 智能电表的普及为短期负荷预测提供了海量数据,使得负荷精细化预测成为可能,而温度是影响夏季负荷的重要因素。提出一种考虑温度模糊化的多层长短时记忆神经网络(ML-LSTM)短期负荷预测方法。利用隶属度函数将预测时刻的温度和当日的平均温度进行模糊化处理,减小夏季温度波动性对负荷预测的影响;建立含3层隐藏层的长短时记忆神经网络(LSTM)预测网络,并利用适应性矩估计(Adam)优化算法提高LSTM梯度参数的自适应性学习能力。利用西南某地区2018年6月至8月的实测温度和负荷数据进行验证,负荷预测结果表明,ML-LSTM模型比BP神经网络和支持向量机的负荷预测精度更高,且温度的模糊化处理提高了模型的泛化性。 展开更多
关键词 短期负荷预测 多层长短时记忆神经网络 温度模糊化 adam算法
下载PDF
基于多特征融合神经网络的串联电弧故障识别技术 被引量:26
2
作者 龙官微 穆海宝 +2 位作者 张大宁 李洋 张冠军 《高电压技术》 EI CAS CSCD 北大核心 2021年第2期463-471,共9页
传统低压保护装置如低压断路器、熔断器等无法有效检测出由于接触不良、绝缘失效等导致的串联电弧故障,因此如何准确检测串联电弧故障成为目前研究的热点问题。为此,采用基于电流波形的检测方法展开深入研究,通过搭建电弧故障平台模拟... 传统低压保护装置如低压断路器、熔断器等无法有效检测出由于接触不良、绝缘失效等导致的串联电弧故障,因此如何准确检测串联电弧故障成为目前研究的热点问题。为此,采用基于电流波形的检测方法展开深入研究,通过搭建电弧故障平台模拟串联电弧故障,获得了不同负载下正常和电弧故障的数据;然后在此基础上建立了多特征融合的神经网络算法,并利用mini-batch梯度下降、指数衰减的学习率和Adam的优化算法对模型进行了优化。研究结果表明:所提算法的查准率及查全率分别能达到98%和99%,相比于支持向量机和BP神经网络算法具有更高的识别率。研究为串联电弧故障识别提供了一种新的算法,对于该方向的研究拓展了新的思路。 展开更多
关键词 串联电弧 故障识别 多特征融合 神经网络 adam算法
下载PDF
基于PCC-LSTM模型的短期负荷预测方法 被引量:18
3
作者 刘倩倩 刘钰山 +3 位作者 温烨婷 何杰 李晓 毕大强 《北京航空航天大学学报》 EI CAS CSCD 北大核心 2022年第12期2529-2536,共8页
短期负荷预测是电网合理调度和平稳运行的基础。为提高短期负荷预测精度,提出了一种基于Pearson相关系数(PCC)和长短期记忆(LSTM)神经网络的短期负荷预测方法。该方法运用Pearson相关性分析对原始多维输入变量组成的时间序列进行相关性... 短期负荷预测是电网合理调度和平稳运行的基础。为提高短期负荷预测精度,提出了一种基于Pearson相关系数(PCC)和长短期记忆(LSTM)神经网络的短期负荷预测方法。该方法运用Pearson相关性分析对原始多维输入变量组成的时间序列进行相关性分析,选取与电力负荷数据相关性较大的影响因素作为输入量,实现原始数据的降维和选优;再通过LSTM神经网络结合Adam优化算法,对与电力负荷相关性较大的影响因素和负荷实际输出序列之间的非线性关系建立网络模型。以嘉捷BOX和重庆丽苑维景国际大酒店的负荷数据作为实际算例,并与Prophet、LSTNet、门控循环(GRU)神经网络模型方法进行对比。结果表明:所提PCC-LSTM模型预测精度均在91%以上,最高可达95.44%,有效提高了负荷预测的精度。 展开更多
关键词 Pearson相关系数 长短期记忆神经网络 负荷预测 adam算法 时间序列
下载PDF
差分隐私保护下的Adam优化算法研究 被引量:18
4
作者 李敏 李红娇 陈杰 《计算机应用与软件》 北大核心 2020年第6期253-258,296,共7页
神经网络的优化算法在训练模型时所使用的数据集可能包含用户的敏感信息,容易在训练的过程中造成隐私泄露。为了在神经网络优化算法Adam上实现差分隐私保护,提出差分隐私保护下的Adam优化算法(DP-Adam)。将Adam优化算法与差分隐私理论结... 神经网络的优化算法在训练模型时所使用的数据集可能包含用户的敏感信息,容易在训练的过程中造成隐私泄露。为了在神经网络优化算法Adam上实现差分隐私保护,提出差分隐私保护下的Adam优化算法(DP-Adam)。将Adam优化算法与差分隐私理论结合,在神经网络反向传播的Adam梯度下降更新参数过程中加入满足差分隐私的拉普拉斯噪声,从而达到对神经网络优化算法进行隐私保护的目的。实验表明,对于相同的隐私预算,随着训练轮数的增加,DP-Adam训练模型的精度优于DP-SGD。在达到同样的模型精度的条件下,DP-Adam所需要的隐私预算更小,即DP-Adam的隐私保护程度比DP-SGD更高。 展开更多
关键词 神经网络 差分隐私 adam算法 隐私保护
下载PDF
基于LSTM网络的住宅负荷短期预测 被引量:16
5
作者 谢明磊 《广东电力》 2019年第6期108-114,共7页
在智能电网中,若未考虑海量的住宅负荷和气象数据的相关性,就会导致输入信息冗余,为此提出一种长短期记忆(long short-term memory,LSTM)网络的住宅负荷短期预测方法。该方法首先利用LSTM网络对负荷数据、日期类型、气象数据进行动态建... 在智能电网中,若未考虑海量的住宅负荷和气象数据的相关性,就会导致输入信息冗余,为此提出一种长短期记忆(long short-term memory,LSTM)网络的住宅负荷短期预测方法。该方法首先利用LSTM网络对负荷数据、日期类型、气象数据进行动态建模,然后采用主成分分析对气象等数据进行特征选择以过滤掉数据间的冗余信息,最后使用自适应矩估计(adaptive moment estimation, ADAM)算法优化后的LSTM网络参数提高模型的泛化能力。采用美国马萨诸塞州某小区公寓实测数据进行短期负荷预测,结果验证了所提方法的有效性和实用性。 展开更多
关键词 长短期记忆网络 主成分分析 adam算法 负荷预测 信息冗余
下载PDF
基于Adam算法和神经网络的照度计算方法 被引量:16
6
作者 汤烨 陆卫忠 +1 位作者 陈成 黄宏梅 《照明工程学报》 2019年第2期50-54,共5页
针对传统照度计算中利用系数计算过程繁琐、误差大的问题,提出并实现了基于Adam优化算法的由固定网络和可变网络并联构成的神经网络模型,进行灯具的利用系数拟合计算,分别拟合了计算地板反射比为0.2时的利用系数和地板反射比不为0.2时... 针对传统照度计算中利用系数计算过程繁琐、误差大的问题,提出并实现了基于Adam优化算法的由固定网络和可变网络并联构成的神经网络模型,进行灯具的利用系数拟合计算,分别拟合了计算地板反射比为0.2时的利用系数和地板反射比不为0.2时利用系数修正系数。使用训练好的模型代替传统的利用系数查表过程,降低了照度计算的计算误差,提高了工程实用性。实验结果表明,最大误差率约为2%。 展开更多
关键词 adam算法 神经网络 照度计算 利用系数
下载PDF
基于模糊信息粒化和长短期记忆网络的短期风速预测 被引量:16
7
作者 殷豪 黄圣权 +2 位作者 刘哲 孟安波 杨跞 《电测与仪表》 北大核心 2019年第11期101-107,共7页
针对风速点预测无法对预测结果进行风险评估、区间预测难以满足电网精细化要求,以及现有静态预测方法难以描述风速序列长期相关性的现象,提出一种基于模糊信息粒化(Fuzzy Information Granulation,FIG)和长短期记忆(Long Short-Term Mem... 针对风速点预测无法对预测结果进行风险评估、区间预测难以满足电网精细化要求,以及现有静态预测方法难以描述风速序列长期相关性的现象,提出一种基于模糊信息粒化(Fuzzy Information Granulation,FIG)和长短期记忆(Long Short-Term Memory,LSTM)网络的动态预测模型。该方法先对风速序列进行模糊信息粒化,提取出粒化后数据的最大值 (区间上界)、最小值(区间下界)和平均值。其次采用ADAM算法优化的LSTM网络对各粒化数据进行动态建模,得到能描述风速波动性的区间预测结果和点预测结果。算列表明,所提动态模型的预测效果比其它基本模型的预测效果更好。 展开更多
关键词 点预测 区间预测 长短记忆网络 模糊信息粒化 adam算法
下载PDF
基于Adam局部优化的分布式近似牛顿深度学习模型训练 被引量:15
8
作者 毕常遥 袁晓彤 《计算机应用与软件》 北大核心 2021年第10期278-283,共6页
分布式学习是减轻现代机器学习系统中不断增加的数据和模型规模压力的有效工具之一。DANE算法是一种近似牛顿方法,已被广泛应用于通信高效的分布式机器学习。其具有收敛速度快且无须计算Hessian矩阵逆的优点,从而可以在高维情况下显著... 分布式学习是减轻现代机器学习系统中不断增加的数据和模型规模压力的有效工具之一。DANE算法是一种近似牛顿方法,已被广泛应用于通信高效的分布式机器学习。其具有收敛速度快且无须计算Hessian矩阵逆的优点,从而可以在高维情况下显著减少通信和计算开销。为了进一步提高计算效率,就需要研究如何加快DANE的局部优化。选择使用最流行的自适应梯度优化算法Adam取代常用的随机梯度下降法来求解DANE的局部单机子优化问题是一种可行的方法。实验表明,基于Adam的优化在收敛速度上可以明显快于原始的基于SGD的实现,且几乎不会牺牲模型泛化性能。 展开更多
关键词 深度学习 近似牛顿法 分布式优化 adam算法 随机抽样
下载PDF
基于Adam算法优化GRU神经网络的短期负荷预测模型 被引量:13
9
作者 高翱 李国玉 +3 位作者 撖奥洋 周生奇 魏振 张智晟 《电子设计工程》 2022年第9期180-183,188,共5页
为提高短期负荷预测的精度,文中提出了一种基于Adam算法优化门控循环单元(Gated Recurrent Unit,GRU)神经网络的短期负荷预测模型。针对循环神经网络(Recurrent Neural Network,RNN)存在的梯度消失和梯度下降、长短期记忆神经网络(Long ... 为提高短期负荷预测的精度,文中提出了一种基于Adam算法优化门控循环单元(Gated Recurrent Unit,GRU)神经网络的短期负荷预测模型。针对循环神经网络(Recurrent Neural Network,RNN)存在的梯度消失和梯度下降、长短期记忆神经网络(Long Short-Term Memory,LSTM)在运行时计算时间较长的问题,采用GRU神经网络作为负荷预测的模型,针对随机梯度下降(Stochastic Gradient Descent)算法前期收敛速度较慢所导致的预测精度不高的问题,利用Adam算法来替代GRU神经网络中的随机梯度下降算法,并采用学习率衰减策略来加速模型的收敛,提高预测的精度。算例仿真结果表明,文中所提出的预测模型比常规GRU神经网络预测模型、BP神经网络预测模型具有更高的预测精度。 展开更多
关键词 短期负荷预测 电力系统 GRU神经网络 adam算法 循环神经网络
下载PDF
基于Adam优化算法的双目机器人手眼标定方法 被引量:13
10
作者 费致根 吴志营 +3 位作者 肖艳秋 王才东 付吉祥 李培婷 《机床与液压》 北大核心 2021年第11期26-30,共5页
在智能制造领域,视觉机器人应用前景十分广阔。视觉机器人的手眼标定精度直接关系到机器人的后续作业精度。为了进一步提高机器人的手眼标定精度,现提出一种基于Adam优化算法的双目Eye-to-Hand型机器人的手眼标定方法。根据多体运动学理... 在智能制造领域,视觉机器人应用前景十分广阔。视觉机器人的手眼标定精度直接关系到机器人的后续作业精度。为了进一步提高机器人的手眼标定精度,现提出一种基于Adam优化算法的双目Eye-to-Hand型机器人的手眼标定方法。根据多体运动学理论,建立了6DOF机器人手眼标定数学模型,以Halcon输出的手眼标定矩阵为初始值,采用Adam优化算法对目标函数进行迭代求解,将由优化前后手眼矩阵得到的两组机器人末端坐标系的位姿分别与从示教器得到的位姿作差值,并取Frobenius范数。结果表明:相机标定误差为0.089个像素,优化后的Frobenius范数平均值小于优化前,且一致性好。 展开更多
关键词 手眼标定 双目视觉 adam优化算法 Eye-to-Hand型机器人
下载PDF
基于GA-Adam优化算法的BP神经网络农业灌水量预测模型 被引量:8
11
作者 王建辉 冉金鑫 +3 位作者 沈莹莹 韩振中 崔远来 罗玉峰 《中国农村水利水电》 北大核心 2022年第4期138-143,共6页
针对传统BP神经网络预测农业灌水量时存在易陷入局部最小值、难以选择合适学习率的问题,提出了一种基于遗传算法和Adam算法并行优化BP神经网络的农业灌水量预测模型。该模型利用遗传算法对BP神经网络进行初始权值和阈值的预筛选,然后采... 针对传统BP神经网络预测农业灌水量时存在易陷入局部最小值、难以选择合适学习率的问题,提出了一种基于遗传算法和Adam算法并行优化BP神经网络的农业灌水量预测模型。该模型利用遗传算法对BP神经网络进行初始权值和阈值的预筛选,然后采用Adam算法来实现学习率自适应于参数梯度不断更新。收集黄河流域陇中片灌溉分区内7个典型灌区的气象数据以及玉米实测灌水数据对模型进行训练,同时与传统GD法、GA法、Adam法下的网络模型进行对比。结果表明:GA-Adam模型仅在训练次数为67次,训练时长为0.403 s时便达到预设精度;且GA-Adam模型预测值与期望值的RMSE和MAE最小,分别为54.73和47.76,决定系数R^(2)为0.81,总体预测效果最好。 展开更多
关键词 农业灌水量预测 BP神经网络 遗传算法 adam算法 GA-adam
下载PDF
基于长短时记忆网络的电力系统负荷预测方法研究 被引量:11
12
作者 王鑫琪 李闯 +1 位作者 焦晗 李焱飞 《电工电气》 2019年第11期17-20,共4页
准确的负荷预测对保持电网的稳定性和提高当地经济效益、节约成本有重大帮助。考虑到负荷数据带有时序性,以及智能电网的发展所带来的数据量的增大,建立了长短时记忆网络(LSTM)模型来对未来用电量进行短期负荷预测。针对Adam训练算法可... 准确的负荷预测对保持电网的稳定性和提高当地经济效益、节约成本有重大帮助。考虑到负荷数据带有时序性,以及智能电网的发展所带来的数据量的增大,建立了长短时记忆网络(LSTM)模型来对未来用电量进行短期负荷预测。针对Adam训练算法可能存在的收敛问题,对其进行了改进,并通过MATLAB软件对LSTM网络进行建模,通过与BP神经网络进行对比,结果表明,LSTM模型具有更高的精确度以及实用性。 展开更多
关键词 短期负荷预测 BP神经网络 长短时记忆网络 adam算法
下载PDF
基于Adam优化深度神经网络快速确定瓦斯抽采半径 被引量:8
13
作者 郝天轩 陈国印 +1 位作者 赵立桢 唐一举 《中国安全生产科学技术》 CAS CSCD 北大核心 2022年第6期52-57,共6页
为解决煤矿瓦斯有效抽采半径难以快速准确确定的问题,采用基于Adam算法优化DNN(深度神经网络)方法来预测瓦斯抽采半径。查阅文献共收集已得到验证的970组数据集,每组数据选取煤层瓦斯初始渗透率、钻孔直径、抽采时间、地应力、煤层初始... 为解决煤矿瓦斯有效抽采半径难以快速准确确定的问题,采用基于Adam算法优化DNN(深度神经网络)方法来预测瓦斯抽采半径。查阅文献共收集已得到验证的970组数据集,每组数据选取煤层瓦斯初始渗透率、钻孔直径、抽采时间、地应力、煤层初始瓦斯压力作为预测模型的5个特征量,有效抽采半径作为目标输出值。接着预测模型进行不断学习和训练,最终训练得到1个最优的瓦斯有效抽采半径预测模型。利用训练好的最优预测模型结合Python语言开发出计算有效抽采半径的软件,并使用该软件在四季春煤矿和鹤煤六矿进行有效抽采半径预测的工程实例研究,验证该软件预测抽采半径的实用性和准确性。研究结果表明:通过使用开发的软件,可快速且较准确地计算出矿井瓦斯有效抽采半径,可为暂不具备现场测试条件的矿井抽采设计提供一定的参考依据。 展开更多
关键词 adam算法 有效抽采半径 预测模型 PYTHON语言 有效抽采半径计算软件
下载PDF
一种改进的自适应动量梯度下降算法 被引量:4
14
作者 姜志侠 宋佳帅 刘宇宁 《华中科技大学学报(自然科学版)》 EI CAS CSCD 北大核心 2023年第5期137-143,共7页
为改进Adam算法存在的全局收敛性较差的问题,提出一个带有角系数的AngleAdam算法.该算法利用两次连续梯度间的角度信息自适应控制步长,一定程度改进了Adam算法全局收敛性较差的问题,提升了优化能力.采用在线学习框架,对算法从遗憾界的... 为改进Adam算法存在的全局收敛性较差的问题,提出一个带有角系数的AngleAdam算法.该算法利用两次连续梯度间的角度信息自适应控制步长,一定程度改进了Adam算法全局收敛性较差的问题,提升了优化能力.采用在线学习框架,对算法从遗憾界的角度进行收敛性分析,证明了AngleAdam具有次线性的遗憾.基于构造的三个非凸函数和深度神经网络模型,对AngleAdam算法的优化能力进行实验,实验结果表明该算法可得到较好的优化结果. 展开更多
关键词 机器学习 梯度下降类算法 adam算法 全局收敛性 遗憾界 角度信息
原文传递
一种改进ADAM-CNN模型的钢筋混凝土腐蚀检测方法 被引量:4
15
作者 林旭梅 胡川 +2 位作者 朱广辉 陈一戈 苗芳荣 《中国测试》 CAS 北大核心 2023年第2期8-14,共7页
针对钢筋混凝土腐蚀检测中单一传感器或检测方式获取锈蚀特征信息不足及准确率不高等问题,提出一种改进神经网络模型结构下对集成阳极梯、应变力、温度传感器的多传感器数据融合检测方式。首先将一维多传感器数据二维化,采用卷积核对特... 针对钢筋混凝土腐蚀检测中单一传感器或检测方式获取锈蚀特征信息不足及准确率不高等问题,提出一种改进神经网络模型结构下对集成阳极梯、应变力、温度传感器的多传感器数据融合检测方式。首先将一维多传感器数据二维化,采用卷积核对特征信息滤波提取,提取后的信息平展后连接BP残差神经网络层,增强浅层低非线性度特征信息向深层网络的直接传递和重复利用,提高网络模型的拟合及泛化能力。针对ADAM优化算法在模型训练后期学习率可能震荡不收敛问题,引入分段学习率衰减策略抑制后期震荡,同时对二阶矩估计梯度变化进行调整,提高迭代收敛效率。仿真结果表明,改进后的ADAM-CNN算法模型具有更好的分类性能,在钢筋腐蚀样本测试集上的平均准确率为96.2%。 展开更多
关键词 钢筋混凝土 腐蚀检测 多传感器检测 残差神经网络 adam算法 学习率衰减
下载PDF
Adam优化CNN的滚动轴承多故障耦合诊断方法研究 被引量:7
16
作者 韩煜 张义民 +1 位作者 张凯 王一冰 《机械设计与制造》 北大核心 2022年第8期169-172,共4页
针对传统的故障诊断技术在实际工程中滚动轴承多故障耦合情况下的故障诊断准确率偏低的问题,提出了一种基于Adam算法优化的卷积神经网络(CNN)诊断模型。该方法的原理是从多故障耦合情况下轴承振动数据中自主学习有用的轴承故障检测特征... 针对传统的故障诊断技术在实际工程中滚动轴承多故障耦合情况下的故障诊断准确率偏低的问题,提出了一种基于Adam算法优化的卷积神经网络(CNN)诊断模型。该方法的原理是从多故障耦合情况下轴承振动数据中自主学习有用的轴承故障检测特征信息然后进行准确的故障诊断。为了证明该方法的有效性和保证实验的公平性,在滚动轴承单种故障和多种故障同时存在的情况下,将提出的方法与随机梯度下降法优化的卷积神经网络,支持向量机进行比较。比对使用相同的数据来客观的评估相应的性能。该方法对滚动轴承多故障耦合情况下的15类故障进行实验诊断,准确率达到了100%,使多故障耦合情况的滚动轴承故障诊断准确率大大提高。 展开更多
关键词 滚动轴承 多故障耦合 adam算法 卷积神经网络 故障诊断
下载PDF
反向传播神经网络联合遗传算法对复合材料模量的预测 被引量:6
17
作者 王卓鑫 赵海涛 +4 位作者 谢月涵 任翰韬 袁明清 张博明 陈吉安 《上海交通大学学报》 EI CAS CSCD 北大核心 2022年第10期1341-1348,共8页
为减少测试成本和缩短设计周期,基于机器学习方法对树脂基复合材料模量的预报方法进行了研究.采用一种全新预测方法——神经网络联合遗传算法(GA-ANN),将T800/环氧复合材料的强度、泊松比和失效应变作为反向传播(BP)神经网络的3个输入变... 为减少测试成本和缩短设计周期,基于机器学习方法对树脂基复合材料模量的预报方法进行了研究.采用一种全新预测方法——神经网络联合遗传算法(GA-ANN),将T800/环氧复合材料的强度、泊松比和失效应变作为反向传播(BP)神经网络的3个输入变量,在遗传算法(GA)中得出最优阈值和权重,并将所得数值赋给对应的网络参数,更新BP神经网络以更高的准确率预测树脂基复合材料的模量;同等条件下,用Adam算法进行预测.对比这两种方法,结果充分证明了GA-ANN的可行性. 展开更多
关键词 机器学习 反向传播神经网络 遗传算法 复合材料模量 adam算法
下载PDF
深度学习的BP神经网络在GNSS水准拟合中的应用 被引量:7
18
作者 董洲洋 徐卫明 +1 位作者 庄昊 邱广闻 《海洋测绘》 CSCD 2019年第5期26-29,共4页
针对误差逆向传播 BP ( back propagation)神经网络在 GNSS 水准拟合中存在梯度消失、陷于局部最小点的问题,通过使用深度学习中的分段线性整流函数Relu( rectified linear units)作为神经元激活函数,自适应矩估计Adam ( adaptive momen... 针对误差逆向传播 BP ( back propagation)神经网络在 GNSS 水准拟合中存在梯度消失、陷于局部最小点的问题,通过使用深度学习中的分段线性整流函数Relu( rectified linear units)作为神经元激活函数,自适应矩估计Adam ( adaptive moment estimation)算法作为网络优化函数,提出了一种基于深度学习的 BP 神经网络模型。研究结果表明:改进后的 BP 神经网络内外符合精度分别提高近 50%和 25%,可达 0. 9 cm 和 2. 4 cm,为 GNSS 水准拟合提供了新的思路。 展开更多
关键词 深度学习 GNSS 水准拟合 BP 神经网络 Relu 函数 adam 算法
下载PDF
非光滑凸情形Adam 型算法的最优个体收敛速率 被引量:5
19
作者 黄鉴之 丁成诚 +1 位作者 陶蔚 陶卿 《智能系统学报》 CSCD 北大核心 2020年第6期1140-1146,共7页
Adam是目前深度神经网络训练中广泛采用的一种优化算法框架,同时使用了自适应步长和动量技巧,克服了SGD的一些固有缺陷。但即使对于凸优化问题,目前Adam也只是在线学习框架下给出了和梯度下降法一样的regret界,动量的加速特性并没有得... Adam是目前深度神经网络训练中广泛采用的一种优化算法框架,同时使用了自适应步长和动量技巧,克服了SGD的一些固有缺陷。但即使对于凸优化问题,目前Adam也只是在线学习框架下给出了和梯度下降法一样的regret界,动量的加速特性并没有得到体现。这里针对非光滑凸优化问题,通过巧妙选取动量和步长参数,证明了Adam的改进型具有最优的个体收敛速率,从而说明了Adam同时具有自适应和加速的优点。通过求解l_(1)范数约束下的hinge损失问题,实验验证了理论分析的正确性和在算法保持稀疏性方面的良好性能。 展开更多
关键词 机器学习 AdaGrad算法 RMSProp算法 动量方法 adam算法 AMSGrad算法 个体收敛速率 稀疏性
下载PDF
基于Adam优化神经网络的电梯群控算法 被引量:6
20
作者 雷剑 《智能计算机与应用》 2020年第11期101-105,共5页
针对传统BP神经网络搭建的电梯群控算法中出现的易于陷入局部极值、收敛速度慢、预测值与实际值偏差较大等问题,本文通过分析研究,在使用BP神经网络,拟合某台电梯对某一楼层呼梯信号响应满意度函数的基础上,应用Adam算法优化神经网络的... 针对传统BP神经网络搭建的电梯群控算法中出现的易于陷入局部极值、收敛速度慢、预测值与实际值偏差较大等问题,本文通过分析研究,在使用BP神经网络,拟合某台电梯对某一楼层呼梯信号响应满意度函数的基础上,应用Adam算法优化神经网络的权值和阈值,使用Dropout缓解过拟合现象,减小误差,提高网络预测精度。仿真结果表明,与传统的优化算法相比,此算法收敛速度更快,模型预测准确率更高,减少了候梯时间,提高了电梯运载效率。 展开更多
关键词 adam算法 BP神经网络 电梯群控算法 多目标优化
下载PDF
上一页 1 2 4 下一页 到第
使用帮助 返回顶部