基于拉依达准则的奇异数据滤波法

第四章 智能仪器的基本数据处理算法 数据处理能力是智能仪器水平的标志,不能充分发挥软件作用,等同硬件化的数字式仪器. 基本数据处理算法内容提要 克服随机误差的数字滤波算法 消除系统误差的算法、非线性校正 工程量的标度变换。 第一节 克服随机误差的数字滤波算法 随机误差:由串入仪表的随机干扰、仪器内部器件噪声和A/D量化噪声等引起的,在相同条件下测量同一量时,其大小和符号作无规则变化而无法预测,但在多次测量中符合统计规律的误差。采用模拟滤波器是主要硬件方法。 数字滤波算法的优点: (1)数字滤波只是一个计算过程,无需硬件,因此可靠性高,并且不存在阻抗匹配、特性波动、非一致性等问题。模拟滤波器在频率很低时较难实现的问题,不会出现在数字滤波器的实现过程中。 (2)只要适当改变数字滤波程序有关参数,就能方便的改变滤波特性,因此数字滤波使用时方便灵活。 常用的数字滤波算法 一、克服大脉冲干扰的数字滤波法 1.限幅滤波法 2.中值滤波法 3.基于拉依达准则的奇异数据滤波法(剔除粗大误差) 4. 基于中值数绝对偏差的决策滤波器 二、抑制小幅度高频噪声的平均滤波法1.算数平均 2.滑动平均 3.加权滑动平均 三、复合滤波法 一、克服大脉冲干扰的数字滤波法 克服由仪器外部环境偶然因素引起的突变性扰动或仪器内部不稳定引起误码等造成的尖脉冲干扰,是仪器数据处理的第一步。 通常采用简单的非线性滤波法。 1.限幅滤波法 限幅滤波法(又称程序判别法)通过程序判断被测信号的变化幅度,从而消除缓变信号中的尖脉冲干扰。具体方法是,依赖已有的时域采样结果,将本次采样值与上次采样值进行比较,若它们的差值超出允许范围,则认为本次采样值受到了干扰,应予易除。 a是相邻两个采样值的最大允许增量,其数值可根据y的最大变化速率Vmax及采样周期T确定,即 a = Vmax T      实现本算法的关键是设定被测参量相邻两次采样值的最大允许误差a.要求准确估计Vmax和采样周期T。 2.中值滤波法 中值滤波是一种典型的非线性滤波器,它运算简单,在滤除脉冲噪声的同时可以很好地保护信号的细节信息。 对某一被测参数连续采样n次(一般n应为奇数),然后将这些采样值进行排序,选取中间值为本次采样值。 对温度、液位等缓慢变化的被测参数,采用中值滤波法一般能收到良好的滤波效果。 设滤波器窗口的宽度为n=2k+1,离散时间信号x(i)的长度为N,(i=1,2,…,N;N>>n),则当窗口在信号序列上滑动时,一维中值滤波器的输出: med[x(i)]=x(k+1) 表示窗口2k+1内排序的第k+1个值,即排序后的中间值。 3.基于拉依达准则的奇异数据滤波法(剔除粗大误差) 拉依达准则法的应用场合与程序判别法类似,并可更准确地剔除严重失真的奇异数据。 拉依达准则:当测量次数N足够多且测量服从正态分布时,在各次测量值中,若某次测量值Xi所对应的剩余误差Vi>3σ,则认为该Xi为坏值,予以剔除。 拉依达准则法实施步骤 (1)求N次测量值X1至XN的算术平均值 依据拉依达准则净化数据的局限性 采用3σ准则净化奇异数据,有的仪器通过选择Lσ中的L值(L=2,3,4,5)调整净化门限,L>3,门限放宽,L<3,门限紧缩。采用3σ准则净化采样数据有其局限性,有时甚至失效。 (1)该准则在样本值少于10个时不能判别任何奇异数据; (2)3σ准则是建立在正态分布的等精度重复测量基础上,而造成奇异数据的干扰或噪声难以满足正态分布。 4. 基于中值数绝对偏差的决策滤波器 中值绝对偏差估计的决策滤波器能够判别出奇异数据,并以有效性的数值来取代。采用一个移动窗口 … 利用m个数据来确定 的有效性。如果滤波器判定该数据有效,则输出 否则,如果判定该数据为奇异数据,则用中值来取代。 (1).确定当前数据有效性的判别准则 一个序列的中值对奇异数据的灵敏度远小于序列的平均值,用中值构造一个尺度序列,设{ }中值为Z,则 (2).实现基于L*MAD准则的滤波算法 二、抑制小幅度高频噪声的平均滤波法 小幅度高频电子噪声:电子器件热噪声、A/D量化噪声等。 通常采用具有低通特性的线性滤波器:算数平均滤波法、加权平均滤波法、滑动加权平均滤波法等。 1.算数平均滤波 N个连续采样值(分别为X1至XN)相加,然后取其算术平均值作为本次测量的滤波值。即 2.滑动平均滤波法 对于采样速度较慢或要求数据更新率较高的实时系统,算术平均滤波法是无法使用的。 滑动平均滤波法把N个测量数据看成一个队列,队列的长度固定为N,每进行一次新的采样,把测量结果放入队尾,而去掉原来队首的一个数据