基于双重中位数绝对偏差的证据加权组合方法 被引量：2

1

作者 余鑫 吴根秀 蔡奥丽 《江西师范大学学报（自然科学版）》 CAS 北大核心 2022年第5期523-532,共10页

Dempster-Shafer证据理论目前已被广泛应用于大数据时代的各行各业,但是当该理论应用在高度冲突的证据源进行融合时,往往会产生一些有悖直觉的结果,具有一定的局限性.为了解决这一问题,该文提出了一种基于双重中位数绝对偏差(MAD)检测... Dempster-Shafer证据理论目前已被广泛应用于大数据时代的各行各业,但是当该理论应用在高度冲突的证据源进行融合时,往往会产生一些有悖直觉的结果,具有一定的局限性.为了解决这一问题,该文提出了一种基于双重中位数绝对偏差(MAD)检测和一种新的证据加权组合改进方法.首先通过MAD算法检测出异常证据,再使用这组证据的平均值对异常证据进行修正,然后使用新的证据加权组合方法对证据加权平均后得到最终结果,最后通过随机模拟实验和具体的算例实验,并与其他几种经典的证据合成规则进行比较.仿真结果表明该文提出的方法能有效地解决高度冲突的证据融合问题. 展开更多

关键词 D-S证据理论 中位数绝对偏差 高度冲突

在线阅读 下载PDF 职称材料

基于奇异值分解和中位数绝对偏差的拉曼成像数据去噪方法 被引量：8

2

作者 范贤光 吴腾达 +1 位作者 支瑜亮 王昕 《光谱学与光谱分析》 SCIE EI CAS CSCD 北大核心 2020年第2期436-440,共5页

拉曼成像是一种无损伤、无需标记的光谱成像技术,它可以提供样品的不同组分的分子指纹信息以及空间分布特征,相比其他成像技术有着更重要的应用。但是拉曼散射的截面积小,灵敏度低,加上在很多实验中为了观察某些组分的动态分布而缩短扫... 拉曼成像是一种无损伤、无需标记的光谱成像技术,它可以提供样品的不同组分的分子指纹信息以及空间分布特征,相比其他成像技术有着更重要的应用。但是拉曼散射的截面积小,灵敏度低,加上在很多实验中为了观察某些组分的动态分布而缩短扫描时间,导致最终得到的成像数据被噪声干扰,因此往往需要对信号进行去噪处理。常规的算法一般都是基于一个给定的数学模型对光谱进行处理,容易造成过滤波,使得信号失真;另外,在处理拉曼成像数据时,常规算法往往是对数据进行逐条光谱去噪,从而忽略了多条光谱之间的相互关系,导致最终的拉曼图像仍然受许多噪点干扰。因此,提出了一种基于奇异值分解和中位数绝对偏差的拉曼成像的信号处理方法,用于拉曼成像数据的去噪处理。该方法首先对拉曼成像数据进行奇异值分解,获得一个奇异值矩阵与两个正交矩阵;然后通过中位数绝对偏差法对奇异值矩阵中的各奇异值进行离群值检测,选取前k个被连续标记的离群值作为要保留的奇异值,并将其余的奇异值赋值为零,得到新的奇异值矩阵;最后用新的奇异值矩阵与两个正交矩阵重新求解得到去噪后的拉曼成像数据。实验中,首先验证了中位数绝对偏差法确定前k个奇异值的正确性,其次分别从处理后的图像质量和信号波形两方面对比了该算法与常规算法的去噪效果。结果证明,中位数绝对偏差法可以快速地确定出合理的k值大小,而且,依据该k值处理后的成像数据不仅在成像质量上消除了大量的噪点,使得组分的空间分布特征清晰可见,也在信号波形上较完美地保留了微小谱峰,并恢复光谱信号。该算法不同于常规算法,能同时对整个拉曼成像数据进行处理,并保留光谱之间的统计特征,是一种更加有效的拉曼成像数据的去噪方法。 展开更多

关键词 去噪 拉曼成像 奇异值分解 中位数绝对偏差

在线阅读 下载PDF 职称材料

基于中位数绝对偏差的异常训练样本探测方法 被引量：5

3

作者 龚循强 张方泽 +1 位作者 鲁铁定 陈志高 《激光与光电子学进展》 CSCD 北大核心 2020年第23期165-170,共6页

遥感图像的监督分类技术在信息提取和变化检测领域中具有广泛的应用,其中训练样本的选择至关重要,训练样本的好坏直接决定分类精度的高低。然而,受到条件的限制和人为的错误均可能导致一些不纯或错选的异常训练样本被选取,从而造成分类... 遥感图像的监督分类技术在信息提取和变化检测领域中具有广泛的应用,其中训练样本的选择至关重要,训练样本的好坏直接决定分类精度的高低。然而,受到条件的限制和人为的错误均可能导致一些不纯或错选的异常训练样本被选取,从而造成分类精度的降低。为了解决这个问题,采用中位数绝对偏差法,根据图像的光谱信息探测和剔除遥感图像监督分类任务中不纯和错选的训练样本。选取由Landsat-8获取南昌市部分地区的光学遥感图像数据,使用支持向量机对含有异常训练样本和剔除异常训练样本的两种情况进行监督分类,并对分类结果进行比较。实验结果表明,剔除异常训练样本的分类精度明显优于含异常训练样本。 展开更多

关键词 测量 遥感图像 光谱信息 监督分类 中位数绝对偏差 异常训练样本探测

原文传递

融合相似度与随机森林的数据挖掘算法改进

4

作者 孙宝刚 何国斌 《计算机仿真》 2025年第1期362-366,共5页

为了避免噪声数据干扰数据挖掘效果,提高数据挖掘的精度和质量,提出融合相似度与随机森林的数据挖掘算法。采用奇异值分解算法分解数据矩阵,获得一系列奇异值,同时引入中位数绝对偏差法在上述奇异值中选取较大的奇异值,利用这些奇异值... 为了避免噪声数据干扰数据挖掘效果,提高数据挖掘的精度和质量,提出融合相似度与随机森林的数据挖掘算法。采用奇异值分解算法分解数据矩阵,获得一系列奇异值,同时引入中位数绝对偏差法在上述奇异值中选取较大的奇异值,利用这些奇异值展开重构,得到去噪后的数据;计算去噪后数据的样本熵,将其作为数据特征,结合P值和特征相似度对数据特征展开筛选,剔除冗余特征,选取最优数据特征;建立极限随机森林,将数据特征输入极限随机森林中,实现数据挖掘。实验结果表明,所提算法在数据挖掘过程中具有较高的查全率、F-measure指标以及AUC值,表明所提算法具有良好的数据挖掘性能。 展开更多

关键词 数据相似度 奇异值分解算法 中位数绝对偏差法 极限随机森林 数据挖掘

在线阅读 下载PDF 职称材料

水利工程中的大地电磁时间序列奇异值识别及去噪方法研究

5

作者 刘亚鹏 《新型工业化》 2022年第10期350-353,共4页

随着我国水利工程建设的快速发展,水利工程所遇到的地质工程问题越来越多、越来越复杂,如具有结构松散、岩性变化大、透水性强等特点的深厚覆盖层问题、隐伏断层问题等,对水电工程建设均会产生较大影响。在水利工程中常用大地电磁测深... 随着我国水利工程建设的快速发展,水利工程所遇到的地质工程问题越来越多、越来越复杂,如具有结构松散、岩性变化大、透水性强等特点的深厚覆盖层问题、隐伏断层问题等,对水电工程建设均会产生较大影响。在水利工程中常用大地电磁测深法对不良地质体进行勘探,但大地电磁时间序列极易受到噪声污染,影响勘探效果。因此,通过对常见大地电磁噪声进行分析,通过以时间序列标准差和中位数绝对偏差为判别依据识别时间序列中的奇异值,研究结果表明,以标准差和中位数绝对偏差为判别标准均能成功识别出时间序列中的奇异值,相对于标准差,中位数绝对偏差的识别效果更好。 展开更多

关键词 水利工程 大地电磁 时间序列 标准差 中位数绝对偏差

在线阅读 下载PDF 职称材料

基于改进VMD与MAD的局部放电信号去噪方法研究

6

作者 李梦莹 薛亮 +1 位作者 袁莎莎 范晶晶 《计算机应用与软件》 北大核心 2024年第7期82-87,114,共7页

为有效抑制局部放电(PD)信号中的窄带干扰和白噪声,提出一种基于改进变分模态分解(VMD)与中位数绝对偏差(MAD)的去噪方法。针对VMD的端点效应,提出一种滑动波形匹配镜像法,并构建加权峭度指标来确定VMD算法中的最佳分解模态个数;根据分... 为有效抑制局部放电(PD)信号中的窄带干扰和白噪声,提出一种基于改进变分模态分解(VMD)与中位数绝对偏差(MAD)的去噪方法。针对VMD的端点效应,提出一种滑动波形匹配镜像法,并构建加权峭度指标来确定VMD算法中的最佳分解模态个数;根据分解后各模态峭度指标剔除窄带干扰与白噪声;引入MAD并将其与Savitzky-Golay平滑滤波法结合,对各PD脉冲主导模态中残留的白噪声进一步去噪。通过与传统方法对比,仿真与实测结果均表明,文中所提方法能够滤除更多噪声,同时保留更多PD脉冲的有效信息。 展开更多

关键词 局部放电 变分模态分解 峭度 泄漏能量 中位数绝对偏差

在线阅读 下载PDF 职称材料

基于目标HSV(色调-饱和度-亮度)空间图像自适应分割的直线检测算法

7

作者 尉金强 杜文正 +2 位作者 孙晓艳 聂婷 唐圣金 《火箭军工程大学学报》 2024年第5期59-68,共10页

针对现阶段利用数字图像进行半挂车倒车辅助过程中,存在辅助地标线检测效果鲁棒性差和实时性不高等问题,提出了一种基于目标色调-饱和度-亮度(Hue-SaturationValue,HSV)空间图像自适应分割的直线检测算法。首先,对不同场景下的直线目标... 针对现阶段利用数字图像进行半挂车倒车辅助过程中,存在辅助地标线检测效果鲁棒性差和实时性不高等问题,提出了一种基于目标色调-饱和度-亮度(Hue-SaturationValue,HSV)空间图像自适应分割的直线检测算法。首先,对不同场景下的直线目标进行分割提取,通过统计不同场景下目标HSV空间图像直方图确定图像分割的初始阈值,并基于初始阈值提出一种基于目标HSV空间的图像自适应分割算法。然后,对图像进行预处理及边缘检测,提取目标边缘点。最后,采用基于中位数绝对偏差的最小二乘直线检测方法剔除边缘点中的离群值以提高地标直线目标的检测精度。实验结果表明:该算法能够在不同背景、不同光照条件下对目标进行准确检测,具有良好的鲁棒性;与Hough变换算法相比,该算法的运算速度更快,直线检测的准确率更高,并且对不同颜色地标线的检测也具有良好的适用性。 展开更多

关键词 数字图像处理 目标自适应分割 HSV颜色空间 最小二乘法 中位数绝对偏差

在线阅读 下载PDF 职称材料

卫星重力梯度数据粗差探测方法对比研究

8

作者 邢志斌 李姗姗 +3 位作者 田苗 常品要 杨旭 孟瑶 《航天技术与工程学报》 2024年第1期88-96,共9页

利用GOCE卫星重力梯度数据恢复地球重力场模型时,观测数据的质量直接影响着构建模型的精度。针对GOCE卫星重力梯度观测数据中存在粗差问题,以迹准则法、重力梯度异常法、Overhauser样条插值法为基础,通过贝塞尔公式和利用绝对偏差中位... 利用GOCE卫星重力梯度数据恢复地球重力场模型时,观测数据的质量直接影响着构建模型的精度。针对GOCE卫星重力梯度观测数据中存在粗差问题,以迹准则法、重力梯度异常法、Overhauser样条插值法为基础,通过贝塞尔公式和利用绝对偏差中位数与中误差的关系计算粗差探测阈值,形成了5种不同的粗差探测方法,利用level2实测数据对比分析5种方法的粗差探测能力。实验表明利用绝对偏差中位数与中误差的关系计算出的粗差阈值具有优良的“抗差”特性,可有效探测实测重力梯度观测数据中的粗差。 展开更多

关键词 迹准则法 重力梯度异常法 Overhauser样条插值法 绝对偏差中位数

在线阅读 下载PDF 职称材料

线性相关系数的一种稳健形式 被引量：1

9

作者 甘胜进 林娟 《吉首大学学报（自然科学版）》 CAS 2013年第4期23-25,共3页

相关系数是反应2个随机变量之间线性关系紧密程度的一个量,容易受异常值干扰.提出一种稳健的形式,它在正态分布条件下的性质与相关系数类似,但是抵御异常值远远优于相关系数,具有很好的应用价值.

关键词 相关系数 中位数 中位数绝对偏差 稳健性

在线阅读 下载PDF 职称材料

基于柯西分布的水文序列异常值检测方法 被引量：8

10

作者 高熠飞 王建平 李林峰 《河海大学学报（自然科学版）》 CAS CSCD 北大核心 2020年第4期307-313,共7页

针对基于正态分布的检测算法在窗口中出现偏差较大的极端异常值时,检测模型出现不稳定的现象,提出一种基于柯西分布的异常检测算法。通过试验发现,用滑动窗口内的中位数以及中位数绝对偏差来代替均值以及标准差,可以较好地消除滑动窗口... 针对基于正态分布的检测算法在窗口中出现偏差较大的极端异常值时,检测模型出现不稳定的现象,提出一种基于柯西分布的异常检测算法。通过试验发现,用滑动窗口内的中位数以及中位数绝对偏差来代替均值以及标准差,可以较好地消除滑动窗口内极端异常值对检测算法的影响。探讨了算法中滑动窗口以及置信度的设置,并通过实例对算法进行验证。结果表明,所提算法的检出率在窗口以及置信度设置恰当的情况下保持较高水平。与其他算法对比表明,所提算法对于处理局部波动剧烈的流量时间序列展现出较好的适用性以及鲁棒性。 展开更多

关键词 水文时间序列 数据异常检测 滑动窗口 中位数 中位数绝对偏差 柯西分布

在线阅读 下载PDF 职称材料

GPS坐标时间序列粗差剔除方法比较分析 被引量：8

11

作者 舒颖 《导航定位学报》 CSCD 2021年第4期79-85,共7页

为了更加有效地探测和剔除GPS台站位移序列的粗差,对几种常见的GPS坐标时间序列粗差剔除方法进行比较分析:分别采用GPS坐标时间序列中常用的粗差探测方法如5倍中误差法(5σ)、3倍中误差法(3σ)、中位数绝对偏差法、四分位距法对GPS坐标... 为了更加有效地探测和剔除GPS台站位移序列的粗差,对几种常见的GPS坐标时间序列粗差剔除方法进行比较分析:分别采用GPS坐标时间序列中常用的粗差探测方法如5倍中误差法(5σ)、3倍中误差法(3σ)、中位数绝对偏差法、四分位距法对GPS坐标时间序列进行粗差处理分析;并以40个GPS基准站坐标序列为对象进行粗差剔除比较;最后对去除粗差后的GPS坐标序列进行噪声模型分析,总结粗差剔除前后坐标时间序列的最佳噪声模型。实验结果表明,4种粗差探测和剔除方法都能检测出时间序列中的粗差,且以四分位距法的效果最为明显。 展开更多

关键词 全球定位系统 坐标时间序列 粗差剔除 中位数绝对偏差法 四分位距法 噪声模型

在线阅读 下载PDF 职称材料

一种强干扰背景下间歇采样转发干扰抑制算法 被引量：3

12

作者 李思文 王国宏 +1 位作者 张亮 张翔宇 《现代电子技术》 2021年第15期1-6,共6页

间歇采样转发干扰对雷达信号间歇性“欠采样”,以牺牲部分匹配特性为代价,可减小干扰机转发迟延,快速实现干扰效果。针对强干扰背景下的间歇采样转发干扰,分析了真实回波和干扰信号之间的切片差异,设计线性正则联合字典,将切片化回波细... 间歇采样转发干扰对雷达信号间歇性“欠采样”,以牺牲部分匹配特性为代价,可减小干扰机转发迟延,快速实现干扰效果。针对强干扰背景下的间歇采样转发干扰,分析了真实回波和干扰信号之间的切片差异,设计线性正则联合字典,将切片化回波细分为干扰能量点和真实回波能量点;然后基于中位数绝对偏差识别剔除干扰能量点,完成干扰信号的初步抑制,在此基础上,通过线性正则正交字典构造变换基,利用压缩感知算法重构真实回波。仿真结果验证了所提算法的可行性和有效性。 展开更多

关键词 干扰抑制算法 间歇采样转发干扰 干扰剔除 切片差异 回波区分 干扰信号抑制 中位数绝对偏差

在线阅读 下载PDF 职称材料

一种改进的MAD钟差粗差探测方法 被引量：4

13

作者 黄博华 杨勃航 +3 位作者 李明贵 郭忠楷 茅健佑 王宏 《武汉大学学报（信息科学版）》 EI CAS CSCD 北大核心 2022年第5期747-752,761,共7页

针对传统中位数绝对偏差(median absolute deviation,MAD)方法在探测钟差粗差方面的不足,提出一种改进的MAD钟差粗差探测方法。以一次差分数据为研究对象,通过深入分析传统MAD方法的工作原理,发现传统MAD方法的数学模型表达存在歧义。... 针对传统中位数绝对偏差(median absolute deviation,MAD)方法在探测钟差粗差方面的不足,提出一种改进的MAD钟差粗差探测方法。以一次差分数据为研究对象,通过深入分析传统MAD方法的工作原理,发现传统MAD方法的数学模型表达存在歧义。在优化探测模型结构的基础上,基于岭回归的基本原理,生成动态MAD,有效克服了部分具有显著趋势变化特征的钟差一次差分数据对粗差探测的干扰。使用国际全球卫星导航系统服务组织提供的GPS精密钟差数据进行了实验,并与传统MAD方法进行比较,结果表明,所提方法相较于传统的MAD方法在粗差探测准确率和查全率方面具有明显优势,实际应用价值较高。 展开更多

关键词 卫星钟差 一次差分 中位数绝对偏差 粗差探测 岭回归

原文传递