-
题名基于GoogLeNet模型的剪枝算法
被引量:20
- 1
-
-
作者
彭冬亮
王天兴
-
机构
杭州电子科技大学自动化学院
-
出处
《控制与决策》
EI
CSCD
北大核心
2019年第6期1259-1264,共6页
-
基金
国家自然科学基金项目(61703128)
近地探测重点实验室基金项目(614241404030717)
-
文摘
GoogLeNet包含多个并行的卷积层和池化层,极具表现力,但也导致其参数数量冗余和计算量大,解决该问题的根本途径是将网络稀疏化.剪枝算法通过训练网络、修剪低权重连接和再训练网络三步操作,只保留卷积层和完全连接层中的强相关连接,实现简化网络结构和参数数量的效果,获得近似的网络模型,不影响网络后验概率估计的准确性,达到压缩效果.传统计算方式不适合非均匀稀疏数据结构,所提出的阈值剪枝算法设定合适的阈值,将原始GoogLeNet模型中将近1040万参数减少到65万,大约压缩了16倍.原始网络在进行剪枝处理后,准确率会有所降低,但经过少数次迭代,网络的准确率与原始模型不相上下,达到了压缩模型的效果,验证了阈值剪枝算法对改进GoogLeNet模型训练过程的有效性.
-
关键词
剪枝算法
GoogLeNet
Inception模块
权重阈值
参数冗余
过拟合
-
Keywords
pruning algorithm
GoogLeNet
Inception module
weight threshold
parameter redundancy
overfitting
-
分类号
TP183
[自动化与计算机技术—控制理论与控制工程]
-
-
题名综合负荷模型的电动机参数独立性分析和主导参数选取
被引量:5
- 2
-
-
作者
李立理
陆超
-
机构
清华大学电机系电力系统国家重点实验室
-
出处
《电力系统自动化》
EI
CSCD
北大核心
2009年第13期22-26,共5页
-
文摘
近年来,基于主导参数选择的参数实时辨识策略成为提升辨识效率的一个重要研究方向。在负荷辨识领域,综合负荷模型得到了广泛应用,由于这一模型中电动机参数的复杂性,已有文献的主导参数选取策略往往采用灵敏度仿真方法,然而,灵敏度分析依赖于基准参数、扰动形式以及运行状况,难以反映出参数之间的相互影响,也缺乏有效的理论依据,因此存在较大的局限性。针对综合负荷模型主导参数辨识问题,首先分析了其参数的独立性,推导了独立参数集和常规参数集之间的关系。然后,根据电动机参数的内在特性,对模型参数进行了合理的简化,提出了一种独立参数个数更少的简化模型,以进一步减少主导参数个数。相比已有文献,文中从机理上对综合负荷模型的主导参数选择进行了分析,并通过仿真算例验证了分析结果的正确性。
-
关键词
综合负荷模型
参数冗余
感应电动机
主导参数
-
Keywords
composite load model
redundancy of parameters
induction motor
dominant parameters
-
分类号
TM714
[电气工程—电力系统及自动化]
-
-
题名基于权重活性评价的循环神经网络模型
- 3
-
-
作者
张承
郑明
胡雨阳
夏定纯
-
机构
武汉纺织大学数学与计算机学院
-
出处
《计算机应用与软件》
北大核心
2024年第6期296-304,319,共10页
-
文摘
针对LSTM等循环神经网络存在着结构复杂和参数冗余等问题,对循环神经网络的结构做了相关的研究和分析,提出一种权重活性评价算法,对网络的基本单元进行活性评价和结构的筛选,以提高循环神经网络的结构合理性,降低网络参数的计算量。通过对心律失常数据的实验与测试,分析LSTM网络权重活性的差异以及权重与梯度的变化特征,实验结果表明,运用该算法能够较好地优化循环神经网络的结构,并降低网络参数的冗余。
-
关键词
权重
活性
评价
参数冗余
循环神经网络
-
Keywords
Weight
Activity
Evaluation
Parameter redundancy
Recurrent neural network
-
分类号
TP3
[自动化与计算机技术—计算机科学与技术]
-
-
题名线振动下惯导平台参数辨识的实现
被引量:3
- 4
-
-
作者
唐江河
付振宪
余贞宇
邓正隆
-
机构
哈尔滨工业大学航天学院
北京航天控制仪器研究所
-
出处
《航空学报》
EI
CAS
CSCD
北大核心
2009年第6期1077-1083,共7页
-
基金
国家“973”基础研究(JW132006093)
-
文摘
研究了软性连接条件下线振动试验辨识惯导平台陀螺参数的方法。由于在此条件下原始模型不便用于辨识参数,为此提出了平台漂移的平均模型。对比静态模型指出了线振动对模型参数辨识的实质作用。由于利用平均模型来辨识平台参数存在参数冗余的局限性,因此利用两组不同幅值的线振动试验数据来进行辨识。最后验证了这种辨识方案不仅避免了静态条件下高阶陀螺参数难以收敛的问题,同时也解决了平均模型中参数冗余的局限性问题。
-
关键词
线振动
惯导平台
陀螺
辨识
参数冗余
-
Keywords
linear vibration
inertial platform
gyro
identification
parameter redundancy
-
分类号
V294.322
[航空宇航科学技术]
-
-
题名改进TCN算法在人体跌倒检测中的应用
- 5
-
-
作者
魏嘉雪
高冠东
滕桂法
-
机构
河北农业大学信息科学与技术学院
中央司法警官学院信息管理系
河北农业大学河北省农业大数据重点实验室
-
出处
《计算机工程与设计》
北大核心
2023年第9期2859-2866,共8页
-
基金
河北省自然科学基金项目(C2020204055)
河北省教育厅科学研究重点基金项目(ZD2021056)。
-
文摘
为提高跌倒检测的准确率,解决传统RNN和CNN训练模型复杂且易产生梯度爆炸现象的问题,提出一种改进的时间卷积网络(TCN)算法。借鉴ResNet恒等映射的思想对残差结构进行改进,将激活函数改进为Leaky ReLU,减少神经元坏死的现象,为避免参数冗余造成模型过拟合问题,选用全局平均池化层代替全连接层实现分类。实验结果表明,该算法判断准确率达到99.4%,较改进前提高了10.51%,与其它已有算法相比准确率提高了2.68%~3.63%,能够准确检测出跌倒行为,对于及时识别老年人跌倒并报警,预防因发现不及时致残致死,具有较高的实用价值和社会价值。
-
关键词
时间卷积网络
跌倒检测
残差结构
恒等映射
激活函数
全局平均池化
参数冗余
-
Keywords
time convolutional network
fall detection
residual structure
identity mapping
activation function
global average pooling
parameter redundancy
-
分类号
TP391
[自动化与计算机技术—计算机应用技术]
-
-
题名轻量非对齐卷积神经网络模型探索
被引量:1
- 6
-
-
作者
何鑫
祁欣
马海涛
赵宇海
于长永
-
机构
东北大学计算机科学与工程学院
-
出处
《小型微型计算机系统》
CSCD
北大核心
2019年第9期1815-1819,共5页
-
基金
国家自然科学基金项目(61772124,61332014,61401080,61402087)资助
河北省自然科学基金项目(F2015501049)资助
+1 种基金
中央高校基本科研业务费项目(N150402002)资助
河北省教育厅项目(QN2014339)资助
-
文摘
本文提出了一种轻量非对齐卷积神经网络模型的探索方法,探讨了现有卷积神经网络(CNN)模型中网络的参数数量与性能的关系,针对现有模型存在参数冗余的问题,给出了带有参数控制的解决方案.首先,分析了经典CNN模型的网络结构,并将其标准化表示为基于最小计算单元的模型结构;基于此进行比较分析,总结了近年来网络模型存在的问题和调整的趋势.其次,提出了一种轻量非对齐卷积神经网络模型的探索方法,该方法能够基于一组概率参数对模型参数数量进行控制,并实现不同级别特征的深度融合.最后,以DenseNet-40模型为基础进行了实验分析,得出了以测试误差下降≤1%为代价能够削减掉≥50%模型参数的结果.
-
关键词
CNN
非对齐网络
轻量化
特征融合
参数冗余
-
Keywords
CNN
unaligned network
lightw eight
feature fusion
parameter redundancy
-
分类号
TP183
[自动化与计算机技术—控制理论与控制工程]
-
-
题名一种基于清浊音分类和参数冗余的语音差错隐藏算法
- 7
-
-
作者
肖勇
张雄伟
邹霞
杨吉斌
-
机构
[
解放军理工大学通信工程学院
-
出处
《信号处理》
CSCD
北大核心
2009年第5期724-728,共5页
-
基金
江苏省“333高层次人才培养工程”资助项目
江苏省自然科学基金资助项目(BK2006001)。
-
文摘
为避免信道误码条件下低速率编码语音质量的严重恶化,提出了一种针对MELP语音编码的差错隐藏算法。在利用一阶马尔可夫模型描述帧间参数转移概率的基础上,算法构造了帧内增益与分带清浊音判决参数之间的转移概率;在语音合成时,提出了基于最大似然(ML)的清浊音分类模式保护;并对清音帧和浊音帧采用不同的参数重构方案。将算法与近年来针对MELP的两种差错隐藏算法进行了比较,测试结果表明在10^(-2)量级的随机误码的条件下,算法具有更好的差错隐藏性能。
-
关键词
语音编码
MELP
差错隐藏
清浊音分类
参数冗余
-
Keywords
speech coding
MELP
error concealment
voiced/unvoiced mode
residual redundancy
-
分类号
TN912
[电子电信—通信与信息系统]
-
-
题名磨损磨粒显微形态特征信息的优化提取
- 8
-
-
作者
沈如芸
樊瑜瑾
张学丽
-
机构
昆明理工大学机电工程学院
-
出处
《矿山机械》
北大核心
2007年第4期123-126,共4页
-
文摘
针对磨损磨粒特征信息复杂的特点,将参数敏感性分析、参数区分度分析以及参数冗余度分析方法,引入对磨损磨粒显微特征的提取优化中,提取对于磨粒特征信息有用的参数,降低了磨粒识别算法的复杂性,提高了识别分析效率,为磨粒分析与识别奠定了基础。
-
关键词
显微形态特征
参数敏感性
参数区分度
参数冗余度
-
分类号
TH117.1
[机械工程—机械设计及理论]
-