期刊导航
期刊开放获取
cqvip
退出
期刊文献
+
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
任意字段
题名或关键词
题名
关键词
文摘
作者
第一作者
机构
刊名
分类号
参考文献
作者简介
基金资助
栏目信息
检索
高级检索
期刊导航
共找到
2
篇文章
<
1
>
每页显示
20
50
100
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
显示方式:
文摘
详细
列表
相关度排序
被引量排序
时效性排序
用于图像分类的卷积神经网络中激活函数的设计
被引量:
57
1
作者
王红霞
周家奇
+1 位作者
辜承昊
林泓
《浙江大学学报(工学版)》
EI
CAS
CSCD
北大核心
2019年第7期1363-1373,共11页
为了提高图像分类效果,针对卷积神经网络中常用激活函数relu在x负半轴的导数恒为零,导致训练过程中容易造成神经元"坏死"以及现有组合激活函数relu-softplus在模型收敛情况下学习率过小导致收敛速度慢的问题,提出新的组合激...
为了提高图像分类效果,针对卷积神经网络中常用激活函数relu在x负半轴的导数恒为零,导致训练过程中容易造成神经元"坏死"以及现有组合激活函数relu-softplus在模型收敛情况下学习率过小导致收敛速度慢的问题,提出新的组合激活函数relu-softsign.分析激活函数在训练过程中的作用,给出激活函数在设计时需要考虑的要点;根据这些要点,将relu和softsign函数于x轴正、负半轴进行分段组合,使其x负半轴导数不再恒为零;分别在MNIST、PI100、CIFAR-100和Caltech256数据集上,与单一的激活函数和relu-softplus组合激活函数进行对比实验.实验结果表明,使用relu-softsign组合激活函数提高了模型分类准确率,简单有效地缓解了神经元不可逆"坏死"现象;加快了模型的收敛速度,在复杂数据集上该组合函数的收敛性能更好.
展开更多
关键词
图像分类
卷积神经网络
激活
函数
relu
神经元坏死
组合
激活
函数
下载PDF
职称材料
新的组合激活函数BP网络模型研究
被引量:
7
2
作者
张海燕
冯天瑾
《青岛海洋大学学报(自然科学版)》
CSCD
北大核心
2002年第4期621-626,共6页
作者提出了一种新的 BP神经网络模型 ,其隐层激活函数采用中心参数可调的 Gaussian函数 ,输出层采用斜度可调的 Sigmoid函数 ,从而神经元具有了更强的信息存储、处理能力。由于采用组合函数 ,将 Gaussian函数良好的局部性和 Sigmoid函...
作者提出了一种新的 BP神经网络模型 ,其隐层激活函数采用中心参数可调的 Gaussian函数 ,输出层采用斜度可调的 Sigmoid函数 ,从而神经元具有了更强的信息存储、处理能力。由于采用组合函数 ,将 Gaussian函数良好的局部性和 Sigmoid函数良好的全局性相结合 ,提高了神经网络的收敛速度。几个典型实验的结果表明 ,与传统 BP网络模型相比 。
展开更多
关键词
BP神经网络
神经元模型
组合
激活
函数
内部智能处理
下载PDF
职称材料
题名
用于图像分类的卷积神经网络中激活函数的设计
被引量:
57
1
作者
王红霞
周家奇
辜承昊
林泓
机构
武汉理工大学计算机科学与技术学院
出处
《浙江大学学报(工学版)》
EI
CAS
CSCD
北大核心
2019年第7期1363-1373,共11页
文摘
为了提高图像分类效果,针对卷积神经网络中常用激活函数relu在x负半轴的导数恒为零,导致训练过程中容易造成神经元"坏死"以及现有组合激活函数relu-softplus在模型收敛情况下学习率过小导致收敛速度慢的问题,提出新的组合激活函数relu-softsign.分析激活函数在训练过程中的作用,给出激活函数在设计时需要考虑的要点;根据这些要点,将relu和softsign函数于x轴正、负半轴进行分段组合,使其x负半轴导数不再恒为零;分别在MNIST、PI100、CIFAR-100和Caltech256数据集上,与单一的激活函数和relu-softplus组合激活函数进行对比实验.实验结果表明,使用relu-softsign组合激活函数提高了模型分类准确率,简单有效地缓解了神经元不可逆"坏死"现象;加快了模型的收敛速度,在复杂数据集上该组合函数的收敛性能更好.
关键词
图像分类
卷积神经网络
激活
函数
relu
神经元坏死
组合
激活
函数
Keywords
image classification
convolutional neural network
activation function
relu
neurons necrosis
combinatorial activation function
分类号
TP391 [自动化与计算机技术—计算机应用技术]
下载PDF
职称材料
题名
新的组合激活函数BP网络模型研究
被引量:
7
2
作者
张海燕
冯天瑾
机构
青岛海洋大学电子工程系
出处
《青岛海洋大学学报(自然科学版)》
CSCD
北大核心
2002年第4期621-626,共6页
基金
国家自然科学基金课题 (6 96 75 0 0 5 )
文摘
作者提出了一种新的 BP神经网络模型 ,其隐层激活函数采用中心参数可调的 Gaussian函数 ,输出层采用斜度可调的 Sigmoid函数 ,从而神经元具有了更强的信息存储、处理能力。由于采用组合函数 ,将 Gaussian函数良好的局部性和 Sigmoid函数良好的全局性相结合 ,提高了神经网络的收敛速度。几个典型实验的结果表明 ,与传统 BP网络模型相比 。
关键词
BP神经网络
神经元模型
组合
激活
函数
内部智能处理
Keywords
BP neural networks
neuron models
combined activation function
internal intellectual processing
分类号
TP183 [自动化与计算机技术—控制理论与控制工程]
下载PDF
职称材料
题名
作者
出处
发文年
被引量
操作
1
用于图像分类的卷积神经网络中激活函数的设计
王红霞
周家奇
辜承昊
林泓
《浙江大学学报(工学版)》
EI
CAS
CSCD
北大核心
2019
57
下载PDF
职称材料
2
新的组合激活函数BP网络模型研究
张海燕
冯天瑾
《青岛海洋大学学报(自然科学版)》
CSCD
北大核心
2002
7
下载PDF
职称材料
已选择
0
条
导出题录
引用分析
参考文献
引证文献
统计分析
检索结果
已选文献
上一页
1
下一页
到第
页
确定
用户登录
登录
IP登录
使用帮助
返回顶部