期刊文献+
共找到22篇文章
< 1 2 >
每页显示 20 50 100
全面数据质量管理框架在配电网领域的应用分析 被引量:27
1
作者 秦丽文 梁朔 +2 位作者 高立克 陈绍南 李珊 《电力系统及其自动化学报》 CSCD 北大核心 2020年第4期62-68,共7页
电力数据质量问题日益突出,影响了电力数据挖掘和能源大数据分析的准确性和有效性。本文针对当前电力系统新环境下配电网数据特点及产生数据质量问题的原因进行梳理,获得数据质量出现的主要影响因素;给出提升配电网数据质量的管理平台架... 电力数据质量问题日益突出,影响了电力数据挖掘和能源大数据分析的准确性和有效性。本文针对当前电力系统新环境下配电网数据特点及产生数据质量问题的原因进行梳理,获得数据质量出现的主要影响因素;给出提升配电网数据质量的管理平台架构,并对数据质量评价和数据质量控制两个核心技术内容进行分析;提出考虑数据质量管理需求的异常数据剔除及修复策略,实现对不同类型的数据进行动态治理及数据修复。最后通过实际配电网数据验证了质量管理和提升效果。 展开更多
关键词 大数据 数据质量管理 配电网 离群值检测 数据处理
下载PDF
生成高精度轨道电子地图的数据处理方法 被引量:14
2
作者 左自辉 王开锋 +1 位作者 许聪 刘春雨 《中国铁道科学》 EI CAS CSCD 北大核心 2016年第4期134-138,共5页
为生成铁路线路的高精度轨道电子地图,采用卡尔曼滤波方法对全球导航卫星系统车载设备多次采集到的同一条线路的轨道定位数据进行滤波,剔除采集信息中的野值,从而生成对应该线路的多条轨道曲线;采用轨迹拟合方法对这些轨道曲线进行归一... 为生成铁路线路的高精度轨道电子地图,采用卡尔曼滤波方法对全球导航卫星系统车载设备多次采集到的同一条线路的轨道定位数据进行滤波,剔除采集信息中的野值,从而生成对应该线路的多条轨道曲线;采用轨迹拟合方法对这些轨道曲线进行归一化处理,生成1条轨道拟合曲线;再采用垂直距离判据数据约简算法,去除轨道拟合曲线中的冗余数据;最后运用地理信息系统技术生成该线路的轨道电子地图。采用现场试验数据对给出的方法进行验证。结果表明:采用此方法进行数据处理后所生成的轨道电子地图不但定位精度高、一致性好,而且便于数据的存储和检索。 展开更多
关键词 轨道电子地图 野值剔除 数据约简 轨迹拟合 数据处理
下载PDF
Forecasting Container Throughput of Qingdao Port with a Hybrid Model 被引量:10
3
作者 HUANG Anqiang LAI Kinkeung +1 位作者 LI Yinhua WANG Shouyang 《Journal of Systems Science & Complexity》 SCIE EI CSCD 2015年第1期105-121,共17页
This paper proposes a hybrid forecasting method to forecast container throughput of Qingdao Port.To eliminate the influence of outliers,local outlier factor(lof) is extended to detect outliers in time series,and then ... This paper proposes a hybrid forecasting method to forecast container throughput of Qingdao Port.To eliminate the influence of outliers,local outlier factor(lof) is extended to detect outliers in time series,and then different dummy variables are constructed to capture the effect of outliers based on domain knowledge.Next,a hybrid forecasting model combining projection pursuit regression(PPR) and genetic programming(GP) algorithm is proposed.Finally,the hybrid model is applied to forecasting container throughput of Qingdao Port and the results show that the proposed method significantly outperforms ANN,SARIMA,and PPR models. 展开更多
关键词 Container throughput forecast genetic programming algorithm outlier processing projection pursuit regression.
原文传递
基于多模型融合的热工过程异常值处理方法
4
作者 吴铮 张悦 +1 位作者 董泽 李玲 《计算机仿真》 2024年第2期108-114,共7页
火电机组异常值的检测与修正是热工系统建模的基础。针对热工过程数据具有强耦合、高维度、非线性和时变性等特性,提出了一种基于多模型融合的热工过程异常值处理方法。采用粒子群优化概率神经网络方法对异常值进行检测,解决了常规基于... 火电机组异常值的检测与修正是热工系统建模的基础。针对热工过程数据具有强耦合、高维度、非线性和时变性等特性,提出了一种基于多模型融合的热工过程异常值处理方法。采用粒子群优化概率神经网络方法对异常值进行检测,解决了常规基于经验估计和有限样本聚类寻优不能完整表示整体空间概率特性的问题。针对常规Nadaraya-Watson回归方法在选取光滑参数时易导致过拟合和出现残差、偏差的问题,提出了一种基于滑动窗口优化Nadaraya-Watson回归的方法,自适应填补异常数据。仿真结果表明,所提方法的异常检测和填补效果相较于常规方法分别提升了26.7%和1.76%,证明了方法的有效性。 展开更多
关键词 异常值处理 概率神经网络 粒子群优化 滑动窗口 热工过程
下载PDF
抗差估计在光纤陀螺信号处理中的应用 被引量:4
5
作者 蒋庆仙 王成宾 +2 位作者 吴富梅 陈晓璧 马小辉 《中国惯性技术学报》 EI CSCD 北大核心 2009年第1期71-75,共5页
为了消除静基座寻北时基座扰动对寻北精度的影响,基于抗差估计提出了一种处理光纤陀螺信号的方法。采用最小二乘估计和抗差估计对光纤陀螺的输出值进行处理,比较了信号中残留的噪声项及干扰项的处理效果。计算结果表明:当载体运动比较... 为了消除静基座寻北时基座扰动对寻北精度的影响,基于抗差估计提出了一种处理光纤陀螺信号的方法。采用最小二乘估计和抗差估计对光纤陀螺的输出值进行处理,比较了信号中残留的噪声项及干扰项的处理效果。计算结果表明:当载体运动比较剧烈时,抗差估计可以有效剔除异常干扰,从而可以获得较高的寻北精(密)度。 展开更多
关键词 抗差估计 粗差 基座扰动 数据处理
下载PDF
无侧限抗压强度异常值处理新方法的研究 被引量:4
6
作者 刘鸿飞 刘俊芳 +1 位作者 苏跃宏 金言 《岩土工程学报》 EI CAS CSCD 北大核心 2020年第S01期137-140,共4页
在道路工程中,路面主要承受车辆荷载作用,路面结构应具有足够的强度、刚度、耐久性等性能。故路面结构材料的性能是影响路面服役期质量的重要保证。目前,公路工程中基层材料多选用无机结合类稳定材料,其强度常常采用无侧限抗压强度试验... 在道路工程中,路面主要承受车辆荷载作用,路面结构应具有足够的强度、刚度、耐久性等性能。故路面结构材料的性能是影响路面服役期质量的重要保证。目前,公路工程中基层材料多选用无机结合类稳定材料,其强度常常采用无侧限抗压强度试验测定。在试验结果处理时,对于异常值的处理目前规范推荐3倍标准偏差法(简称3S法)。由于无侧限抗压强度试验样本数较小,采用3S法无法对试验数据中的部分特异数据剔除。针对这一问题,提出了t分布置信区间的新方法,对该方法从理论上进行了分析,另通过对比其他异常值处理方法,证实了t分布置信区间分析法在处理无侧限抗压强度试验数据时是切实可行的,并证实此方法既保证了可能范围的大小又保证了总体指标落在该范围内的概率。 展开更多
关键词 无侧限抗压强度试验 异常值处理 置信区间
下载PDF
基于稳健滤波技术的测量异常值处理的研究 被引量:1
7
作者 温江涛 王玉田 孙洁娣 《传感技术学报》 CAS CSCD 2002年第4期374-376,共3页
本文基于稳键滤波的 M估计技术 ,提出了一种全新的、对大型旋转机械的表面参数测量中出现的异常值的处理方法 ,并给出了数学模型和实验结果。经过此方法处理后的测量数据 ,可以保证在时间顺序上不会发生断裂 ,而且消除了异常值的影响 ,... 本文基于稳键滤波的 M估计技术 ,提出了一种全新的、对大型旋转机械的表面参数测量中出现的异常值的处理方法 ,并给出了数学模型和实验结果。经过此方法处理后的测量数据 ,可以保证在时间顺序上不会发生断裂 ,而且消除了异常值的影响 ,取得了令人满意的结果并为数据的进一步处理、存储和显示做好准备工作。 展开更多
关键词 稳健滤波 M估计 表面参数测量 异常值处理
下载PDF
地震事件实时检测中野值的辨识与替代 被引量:2
8
作者 余建华 李丹丹 黄天辰 《国外电子测量技术》 2011年第7期24-27,共4页
对地震事件做出快速而准确的判定是地震预警的关键技术,然而背景噪声中的干扰信号可能导致地震事件的误判。结合STA/LTA方法的特点,提出一种基于短时间窗的野值辨识与替代方法。该方法具有野值辨识准确,替代值能够较好保持信号原有的变... 对地震事件做出快速而准确的判定是地震预警的关键技术,然而背景噪声中的干扰信号可能导致地震事件的误判。结合STA/LTA方法的特点,提出一种基于短时间窗的野值辨识与替代方法。该方法具有野值辨识准确,替代值能够较好保持信号原有的变化趋势的特点。经仿真分析和地震事件波形检验,该方法能有效消除脉冲干扰,对短时连续干扰也有一定弱化效果,能降低地震事件的误判率。 展开更多
关键词 地震事件检测 格拉布斯准则 野值检测 数据处理
下载PDF
基于机器学习的交通流参数异常数据处理模型研究 被引量:2
9
作者 周博 贾树林 +2 位作者 胡江宇 马双宝 罗维平 《武汉纺织大学学报》 2021年第2期9-14,共6页
交通流数据作为交通系统重要的输入变量,交通流数据采集器所采集的交通流数据质量直接影响着交通系统运行的稳定性;针对交通流数据中所出现的采样数据异常情况,提出一种基于随机森林的缺失值填补及孤立森林算法的交通流异常数据筛选方法... 交通流数据作为交通系统重要的输入变量,交通流数据采集器所采集的交通流数据质量直接影响着交通系统运行的稳定性;针对交通流数据中所出现的采样数据异常情况,提出一种基于随机森林的缺失值填补及孤立森林算法的交通流异常数据筛选方法,在此基础上通过线性回归模型对数据中缺失值及异常值进行填补构建整体交通流数据有效性处理框架;结果表明经过异常值处理模型修复的数据整体满足有效交通流数据要求,可为交通情况预测及交通系统运行提供数据支撑。 展开更多
关键词 交通流数据 数据清洗 孤立森林 线性回归 异常值处理
下载PDF
阵列式柔性力敏传感器的平衡校准标定方法 被引量:1
10
作者 王怀鹏 周旭 +3 位作者 姚志明 杨先军 王鹏 秦嘉深 《传感技术学报》 CAS CSCD 北大核心 2022年第6期719-724,共6页
阵列式柔性力敏传感器在国家安全、医疗健康、工业制造、人机交互等领域发挥着重要作用,但由于材料和制备工艺等因素,传感器存在误差。针对阵列式柔性力敏传感器的一致性问题和反馈值补偿问题,分析其产生的原因,提出并设计了气压型一体... 阵列式柔性力敏传感器在国家安全、医疗健康、工业制造、人机交互等领域发挥着重要作用,但由于材料和制备工艺等因素,传感器存在误差。针对阵列式柔性力敏传感器的一致性问题和反馈值补偿问题,分析其产生的原因,提出并设计了气压型一体化标定台和相应的平衡校准标定方法。标定台使用气泵作为压力源,通过硅胶膜将压力传导至传感器;平衡校准标定方法首先使用基于Q值检验的离群值处理方法对传感器各敏感点进行平衡,然后引入LMBP算法进行校准。实验表明:R^(2)大于0.997,误差小于2.7%F.S,该标定方法实时性和准确性高,操作简单,具有很好的实用性。 展开更多
关键词 阵列式柔性力敏传感器 反馈值补偿 平衡校准 离群值处理 LMBP
下载PDF
面向复杂条件的北斗/GNSS数据粗差处理方法
11
作者 李雪珍 章浙涛 +1 位作者 刘欢 袁海军 《南京信息工程大学学报(自然科学版)》 CAS 北大核心 2022年第6期722-730,共9页
所有观测值中不可避免含有粗差,在具有高遮挡和强反射特性的峡谷环境以及多频多系统的复杂条件下,粗差问题尤为突出.因此研究面向复杂条件时的北斗/GNSS数据粗差的探测识别,以确保定位结果准确可靠.基于均值漂移和方差膨胀的粗差探测提... 所有观测值中不可避免含有粗差,在具有高遮挡和强反射特性的峡谷环境以及多频多系统的复杂条件下,粗差问题尤为突出.因此研究面向复杂条件时的北斗/GNSS数据粗差的探测识别,以确保定位结果准确可靠.基于均值漂移和方差膨胀的粗差探测提出不同阈值的方案,利用实测数据进行粗差探测实验,分析面向复杂条件时的各方案粗差处理的效果.实验结果表明,基于均值漂移的小阈值(U_(1/2α2)(0,1))方案比无粗差处理方案的定位误差RMSE在E、N、U方向上分别改善了0.059 m、0.017 m和0.062 m.基于方差膨胀的大迭代阈值(ω)结合小阈值(k_(0)、k_(1))方案比无粗差处理方案的定位误差RMSE在E、N、U方向上分别改善了0.098 m、0.055 m和0.209 m.结果表明,在复杂条件下基于均值漂移的小阈值(U_(12α2)(0,1))方案和基于方差膨胀的大迭代阈值(ω)结合小阈值(k_(0)、k_(1))方案能够更好地探测和识别粗差. 展开更多
关键词 粗差处理 复杂条件 稳健估计 数据探测
下载PDF
一种新的无线传感器网络中异常节点检测定位算法 被引量:27
12
作者 蒋俊正 杨杰 欧阳缮 《电子与信息学报》 EI CSCD 北大核心 2018年第10期2358-2364,共7页
无线传感器网络中异常节点检测是确保网络数据准确性和可靠性的关键步骤。基于图信号处理理论,该文提出了一种新的无线传感器网络异常节点检测定位算法。新算法首先对网络建立图信号模型,然后基于节点域-图频域联合分析的方法,实现异常... 无线传感器网络中异常节点检测是确保网络数据准确性和可靠性的关键步骤。基于图信号处理理论,该文提出了一种新的无线传感器网络异常节点检测定位算法。新算法首先对网络建立图信号模型,然后基于节点域-图频域联合分析的方法,实现异常节点的检测和定位。具体而言,第1步是利用高通图滤波器提取网络信号的高频分量。第2步首先将网络划分为多个子图,然后筛选出子图输出信号的特定频率分量。第3步对筛选出的子图信号进行阈值判断从而定位疑似异常的子图中心节点。最后通过比较各子图的节点集合和疑似异常节点集合,检测并定位出网络中的异常节点。实验仿真表明,与已有的无线传感器网络中异常检测方法相比,新算法不仅有着较高的异常检测概率,而且异常节点的定位率也较高。 展开更多
关键词 无线传感器网络 异常检测 图信号处理 子图 节点域-图频域联合分析
下载PDF
基于EWT-LOF的热工过程数据异常值检测方法 被引量:25
13
作者 董泽 贾昊 《仪器仪表学报》 EI CAS CSCD 北大核心 2020年第2期126-134,共9页
异常数据检测是热工过程数据处理的重要组成部分,也是进行系统建模、优化、控制的基础。针对热工过程频繁变工况导致异常数据检测困难的情况,提出一种将信号分解方法与基于密度的检测方法相结合的热工过程异常值检测方法。首先利用经验... 异常数据检测是热工过程数据处理的重要组成部分,也是进行系统建模、优化、控制的基础。针对热工过程频繁变工况导致异常数据检测困难的情况,提出一种将信号分解方法与基于密度的检测方法相结合的热工过程异常值检测方法。首先利用经验小波变换方法提取热工过程时间序列的运行趋势,去除序列运行趋势后采用局部离群因子方法对各数据点求取其局部异常值,最后使用箱型图的方法确定序列异常点。通过使用某电厂1 000 MW机组的负荷数据作为实验数据,分别设置0.5%、1%、2%、5%、10%5种误差验证方法的有效性。实验结果表明,所提异常检测方法除对动态过程和稳态过程均具有适用性外,在以上5种误差条件下均取得了较高的检测准确率。 展开更多
关键词 异常数据检测 经验小波变换 局部离群因子 数据预处理 热工过程
下载PDF
弹道跟踪数据野值剔除方法性能分析 被引量:15
14
作者 侯博文 王炯琦 +2 位作者 周萱影 李冬 何章鸣 《上海航天》 CSCD 2018年第4期91-100,共10页
弹道跟踪数据中的野值会影响导弹目标定位精度。对用于弹道跟踪数据的野值剔除方法进行了综述。结合事后和实时两大类处理模式,分析了各野值剔除方法在理论和工程应用上的优缺点,给出了实际应用时的限制因素,建立了野值判决准则和相应... 弹道跟踪数据中的野值会影响导弹目标定位精度。对用于弹道跟踪数据的野值剔除方法进行了综述。结合事后和实时两大类处理模式,分析了各野值剔除方法在理论和工程应用上的优缺点,给出了实际应用时的限制因素,建立了野值判决准则和相应的野值剔除实现步骤。仿真结果表明:野值剔除方法可以有效提高弹道跟踪数据的精度。事后处理模式中,基于格拉布斯准则的野值剔除效果最佳;实时处理模式中,基于自适应门限的五点线性预报法野值剔除效果相对较好,且时间复杂度相对较低,适合实时处理。 展开更多
关键词 弹道跟踪数据 野值剔除 事后处理 实时处理 判决准则 精度 时间复杂度 剔除效果
下载PDF
湖泊水质参数空间分析中异常值的识别与处理 被引量:7
15
作者 刘瑞民 王学军 郑一 《环境科学与技术》 CAS CSCD 2003年第5期17-18,共2页
异常值的存在对湖泊水质参数局部估计精度产生重要影响 ,制约了地统计学在湖泊水质研究中的应用。文章以太湖为例 ,介绍了在湖泊水质参数研究中的三种异常值识别和处理的方法。
关键词 水质参数 太湖 空间分析 异常位识别与处理
下载PDF
闪电定位密度数据泰森多边形优化方法 被引量:6
16
作者 冯真祯 张烨方 +2 位作者 郑栋栋 张泉峰 杨超 《气象科技》 北大核心 2017年第6期1011-1016,共6页
从识别、修订闪电定位监测数据异常值、提高闪电定位监测产品准确度的目的出发,以闪电定位栅格密度图为研究对象,结合人工观测雷电日数据及国内外对小电流幅值闪电数据剔除的研究成果,引入泰森多边形、数据分布假设检验、异常值(五数概... 从识别、修订闪电定位监测数据异常值、提高闪电定位监测产品准确度的目的出发,以闪电定位栅格密度图为研究对象,结合人工观测雷电日数据及国内外对小电流幅值闪电数据剔除的研究成果,引入泰森多边形、数据分布假设检验、异常值(五数概括)处理算法等模型,建立了可用于判别和优化闪电定位监测数据栅格密度异常值的方法,以福建省为例,对该方法进行了实例应用。结果表明,在福建省西、北部区域,闪电定位监测数据存在一定探测误差或数据丢失的情况,并使用人工观测雷电日数据对这些异常值所在的区域进行了修订,该方法适用于闪电定位仪覆盖数量较少区域的闪电定位监测数据异常值识别与优化应用。 展开更多
关键词 闪电定位 人工观测雷电日 异常值处理 泰森多边形
下载PDF
零相位差非点插值和野值识别剔除技术研究 被引量:1
17
作者 王玉海 谢军 《科学与信息化》 2023年第7期106-109,共4页
在干涉仪测向系统中,零相位差非点插值和野值剔除效果直接影响到测向精度。通过对比不同插值方法和分析相位差野值的表现形式,提出了一维线性插值,以及直方图聚类法和二阶导数法两种野值识别及剔除方法,通过对比两种剔除方法的效果,直... 在干涉仪测向系统中,零相位差非点插值和野值剔除效果直接影响到测向精度。通过对比不同插值方法和分析相位差野值的表现形式,提出了一维线性插值,以及直方图聚类法和二阶导数法两种野值识别及剔除方法,通过对比两种剔除方法的效果,直方图聚类法在野值识别处理上具有更强的工程适用性。 展开更多
关键词 零相位差 非点插值 野值识别处理
下载PDF
传感器网络中的局部异常检测算法 被引量:2
18
作者 吴中博 袁磊 王敏 《计算机工程与科学》 CSCD 北大核心 2012年第10期43-47,共5页
找到异常数据对于传感器网络来说非常重要。本文通过一个例子首先提出了局部异常的概念。与传统异常不同,局部异常仅取决于节点及其周围节点的取值。我们给出了局部异常的形式化定义,并首先提出了解决局部异常的Nave算法,由于其能耗过... 找到异常数据对于传感器网络来说非常重要。本文通过一个例子首先提出了局部异常的概念。与传统异常不同,局部异常仅取决于节点及其周围节点的取值。我们给出了局部异常的形式化定义,并首先提出了解决局部异常的Nave算法,由于其能耗过大,又提出了分布式的解决方案DLODA。DLODA将网络分成多个区域,每个区域选择一个簇头,簇头能够在网内提前算出部分查询结果,并过滤掉不会成为查询结果的数据,以节约能量开销。最后从能量消耗和响应时间两个方面对DLODA的性能进行了评估,实验显示DLODA具有良好性能。 展开更多
关键词 传感器网络 局部异常检测 网内处理
下载PDF
多源航迹融合中的数据有效性分析 被引量:1
19
作者 魏浩然 《现代计算机》 2019年第11期58-61,共4页
数据有效性分析是一种能够减少勘误影响,提升数据质量的方法,能够从数据集中找出那些异常的观测值。针对多源航迹融合处理过程中融合数据源可能存在的问题,考虑加入数据有效性分析环节,用来提升融合结果的准确性,并且对比几种有效性检... 数据有效性分析是一种能够减少勘误影响,提升数据质量的方法,能够从数据集中找出那些异常的观测值。针对多源航迹融合处理过程中融合数据源可能存在的问题,考虑加入数据有效性分析环节,用来提升融合结果的准确性,并且对比几种有效性检验方法和异常点处理方法。实验结果表明,改进的融合方法能够有效地提高融合结果精度。基于距离的方法的异常值检测效果更优,而对于异常点的处理,邻值替代更加符合雷达数据处理的特性。 展开更多
关键词 多源融合 数据有效性分析 异常点 基于距离的方法 雷达数据处理
下载PDF
滑动容错辨识算法在航迹数据处理中的应用
20
作者 任朴舟 何红丽 左益宏 《现代防御技术》 北大核心 2007年第1期37-40,91,共5页
由于试验环境和被测目标运动特性的影响,航迹测量数据中会出现斑点型异值。对最小二乘多项式进行改进,引进自适应调节函数和滑动窗口概念,提出了滑动多项式容错辨识算法,详细描述了采用该方法进行异值辨识和修复的具体过程。仿真分析和... 由于试验环境和被测目标运动特性的影响,航迹测量数据中会出现斑点型异值。对最小二乘多项式进行改进,引进自适应调节函数和滑动窗口概念,提出了滑动多项式容错辨识算法,详细描述了采用该方法进行异值辨识和修复的具体过程。仿真分析和实际飞行试验的数据处理表明:该方法对处理含有斑点型异值的测量数据具有良好的效果。 展开更多
关键词 异值识别 滑动容错估计 航迹数据处理
下载PDF
上一页 1 2 下一页 到第
使用帮助 返回顶部