8-数据的误差分析与信号的预处理课件.pptx
- 【下载声明】
1. 本站全部试题类文档,若标题没写含答案,则无答案;标题注明含答案的文档,主观题也可能无答案。请谨慎下单,一旦售出,不予退换。
2. 本站全部PPT文档均不含视频和音频,PPT中出现的音频或视频标识(或文字)仅表示流程,实际无音频或视频文件。请谨慎下单,一旦售出,不予退换。
3. 本页资料《8-数据的误差分析与信号的预处理课件.pptx》由用户(三亚风情)主动上传,其收益全归该用户。163文库仅提供信息存储空间,仅对该用户上传内容的表现方式做保护处理,对上传内容本身不做任何修改或编辑。 若此文所含内容侵犯了您的版权或隐私,请立即通知163文库(点击联系客服),我们立即给予删除!
4. 请根据预览情况,自愿下载本文。本站不保证下载资源的准确性、安全性和完整性, 同时也不承担用户因使用这些下载资源对自己和他人造成任何形式的伤害或损失。
5. 本站所有资源如无特殊说明,都需要本地电脑安装OFFICE2007及以上版本和PDF阅读器,压缩文件请下载最新的WinRAR软件解压。
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 数据 误差 分析 信号 预处理 课件
- 资源描述:
-
1、2022-4-22大连理工大学12022-4-22大连理工大学1Part III数据误差分析与处理数据误差分析与处理大连理工大学硕士研究生校管课程大连理工大学硕士研究生校管课程信号处理与数据分析信号处理与数据分析电子信息与电气工程学部电子信息与电气工程学部邱天爽邱天爽2015年年11月月2022-4-22大连理工大学2第第8章章数据的误差分析与信号的预处理数据的误差分析与信号的预处理大连理工大学硕士研究生校管课程大连理工大学硕士研究生校管课程信号处理与数据分析信号处理与数据分析电子信息与电气工程学部电子信息与电气工程学部邱天爽邱天爽2015年年11月月大连理工大学22022-4-22 内容概要
2、内容概要 8 8.1 .1 引言引言 8 8.2 .2 误差的基本概念与理论误差的基本概念与理论 8.3 8.3 测量测量不确定度的评定与估计不确定度的评定与估计 8.4 8.4 数据处理数据处理的最小二乘方法的最小二乘方法 8.5 8.5 回归分析回归分析 8.6 8.6 信号信号中趋势项和野点的中趋势项和野点的去除去除 8.7 8.7 温度温度测量与数据处理应用实例测量与数据处理应用实例大连理工大学32022-4-228.1 引言引言大连理工大学42022-4-22大连理工大学5 信号处理与测试测量密切相关。信号处理与测试测量密切相关。 测量和测试不可回避的问题是误差问题测量和测试不可回避
3、的问题是误差问题。 误差的大致分类:随机误差;系统误差误差的大致分类:随机误差;系统误差 了解误差了解误差的产生原因和特性的产生原因和特性,对,对误差进行一定误差进行一定的补偿与处理的补偿与处理,从而,从而改善测量精度改善测量精度。 这些这些误差消除的方法,与信号处理中的信号预误差消除的方法,与信号处理中的信号预处理方法是相似的处理方法是相似的。 此外此外,测量数据的最小二乘处理方法与回归分,测量数据的最小二乘处理方法与回归分析,是数据分析处理的基本手段和重要析,是数据分析处理的基本手段和重要内容。内容。2022-4-228.2 误差误差的基本概念与理论的基本概念与理论大连理工大学62022-
4、4-22大连理工大学7 误差的概念:误差的概念:测量误差(这里简称为测量误差(这里简称为“误差误差”)是指对一个)是指对一个量进行测量或测试后,所得量进行测量或测试后,所得到到测量、测试结果测量、测试结果与被测量之间的差异与被测量之间的差异。可以分为绝对误差、相可以分为绝对误差、相对误差和引用误差等。对误差和引用误差等。8.2.1 8.2.1 误差误差的基本概念的基本概念2022-4-22大连理工大学8 (1 1)绝对误差)绝对误差绝对误差绝对误差 定义定义为测量为测量值值 与其与其真值真值 之差,之差,即:即:绝对误差绝对误差并不是误差的绝对值,其值可以为正,也并不是误差的绝对值,其值可以为
5、正,也可以为负可以为负。绝对误差表示测量值偏离其真值的程度绝对误差表示测量值偏离其真值的程度。绝对误差绝对误差的单位与被测量相同的单位与被测量相同。由于真值不易得到,绝对误差由于真值不易得到,绝对误差转化为转化为残余误差残余误差(简(简称称为为“残差残差”),),即即为为 多次测量的平均值。多次测量的平均值。2022-4-2200 v大连理工大学9 (2 2)相对误差)相对误差相对误差相对误差 定义定义为绝对误差与被测量真值之为绝对误差与被测量真值之比:比: (4 4)引用误差)引用误差引用误差引用误差定义定义为测量仪器的误差与仪器特定值之为测量仪器的误差与仪器特定值之比:比:式式中中,D D
6、表示表示测量仪器的误差测量仪器的误差,B B表示表示测量仪器的特测量仪器的特定值,又称为引用值,通常为测量仪器的量程。定值,又称为引用值,通常为测量仪器的量程。2022-4-220100%100%aDYB大连理工大学10 (1 1)随机误差的基本)随机误差的基本概念概念是是指在相同条件下,多次测量同一被测量时,指在相同条件下,多次测量同一被测量时,测量结测量结果的大小和符号以不可预知的方式变化的误差果的大小和符号以不可预知的方式变化的误差,又称为,又称为“偶然误差偶然误差”或或“不定误差不定误差”。随机误差随机误差在一定程度上服从某种统计规律。可以运用在一定程度上服从某种统计规律。可以运用概率
7、统计的方法对随机误差的总体趋势和分布进行估计概率统计的方法对随机误差的总体趋势和分布进行估计,并采取相应的措施减小其影响。,并采取相应的措施减小其影响。8.2.2 8.2.2 随机误差随机误差2022-4-22大连理工大学11 产生的原因产生的原因第一,由于测量仪器结构上不完善或零部件制造不第一,由于测量仪器结构上不完善或零部件制造不精密而产生精密而产生;第二第二,测量过程中环境因素变化或干扰影响所引入,测量过程中环境因素变化或干扰影响所引入;第三第三,测量人员主观因素的影响。,测量人员主观因素的影响。2022-4-22大连理工大学12 (2 2)算数平均值的概念与应用)算数平均值的概念与应用
8、定义:定义:当测量次数趋于无穷时,某次测量的绝对误差可以当测量次数趋于无穷时,某次测量的绝对误差可以写写为为 为为测量结果的测量结果的数学期望;数学期望; 为为测量结果与期望值的偏离值,称为测量结果与期望值的偏离值,称为随机随机误差误差; 为为期望值与真值的偏差期望值与真值的偏差,称为,称为系统误差系统误差。2022-4-2211NiiN00( )( )iiiiiEE iE( )iiE0( )iE大连理工大学13 (3 3)测量的标准差)测量的标准差标准差是标准差是测量数据平均值分散程度的一种测量数据平均值分散程度的一种度量:度量:通常通常用用残差残差 来替代绝对误差来替代绝对误差 ,有:,有
9、:算数平均值的标准差:算数平均值的标准差:2022-4-2221NiiNivi211NiivNNiiv大连理工大学14 (1 1)系统误差的概念)系统误差的概念系统误差(系统误差(system errorsystem error)又称为规律误差,是指在又称为规律误差,是指在一定的测量条件下,对同一个被测量进行多次重复测量一定的测量条件下,对同一个被测量进行多次重复测量时,误差值的大小和符号(正值或负值)均保持不变的时,误差值的大小和符号(正值或负值)均保持不变的误差;或者在条件变化时,按一定规律变化的误差。误差;或者在条件变化时,按一定规律变化的误差。系统误差可以通过实验或分析的方法确定其变化
10、规律系统误差可以通过实验或分析的方法确定其变化规律及误差的产生原因,及误差的产生原因,并在并在测量的结果中给予修正。也测量的结果中给予修正。也可可以通过以通过改善测量条件或测量方法,使之减小或消除改善测量条件或测量方法,使之减小或消除。系统误差系统误差不能依靠增加测量次数来减小或消除。不能依靠增加测量次数来减小或消除。8.2.3 8.2.3 系统误差系统误差2022-4-220( )iE大连理工大学15 (2 2)系统误差的)系统误差的来源来源 测量测量仪器引入的误差仪器引入的误差。 仪器仪器调整引入的误差调整引入的误差。 测量测量者习惯引入的误差者习惯引入的误差。 测量测量条件所引入的误差。
11、是指由温度、气压、气条件所引入的误差。是指由温度、气压、气流、振动等条件在测量过程中发生变化所引入的误流、振动等条件在测量过程中发生变化所引入的误差。差。 测量方法测量方法所引入的误差。是指由于采用不适当的所引入的误差。是指由于采用不适当的测量方法或数据处理方法所引入的误差。测量方法或数据处理方法所引入的误差。2022-4-22大连理工大学16 (3 3)发现、减小和消除系统误差的)发现、减小和消除系统误差的方法方法实验对比法实验对比法: 用于用于发现固定系统误差,其基本思路是改变系统发现固定系统误差,其基本思路是改变系统误差的产生条件,进行不同条件的测量。误差的产生条件,进行不同条件的测量。
12、理论理论分析法分析法: 主要主要用于对测量进行定性的分析判断,以确定是用于对测量进行定性的分析判断,以确定是否存在否存在系统误差。系统误差。数据分析法数据分析法: 主要主要用于对测量进行用于对测量进行定量分析。定量分析。2022-4-22大连理工大学17 粗大误差的概念粗大误差的概念粗大误差(粗大误差(gross errorgross error)是指明显超出规定条件预期)是指明显超出规定条件预期的误差,常简称为的误差,常简称为“粗差粗差”。引起引起粗大误差的原因主要包括错误读取示值,使用有粗大误差的原因主要包括错误读取示值,使用有缺陷的测量器具,测量仪器受到外界振动或电磁干扰而缺陷的测量器具
13、,测量仪器受到外界振动或电磁干扰而发生指示突变等发生指示突变等。粗大粗大误差必须从测量结果中剔除,否则会导致错误的误差必须从测量结果中剔除,否则会导致错误的结论结论。8.2.4 8.2.4 粗大误差粗大误差2022-4-22大连理工大学18 (1 1)粗大误差的判定)粗大误差的判定准则准则1 1: 准则准则式中,式中, 为为可疑数据,可疑数据, 为为测量数据的平均值,测量数据的平均值, 为该数据的残差为该数据的残差, 为测量数据残差的标准差为测量数据残差的标准差。若。若上式满足,则删除该数据。上式满足,则删除该数据。2 2:罗曼诺夫斯基准:罗曼诺夫斯基准则(又称为则(又称为t t分布分布检验检
14、验准则)准则)先剔除一个可疑的测量值,再先剔除一个可疑的测量值,再按照按照t t分布分布来检验被剔来检验被剔除的测量值是否含有粗大误差。除的测量值是否含有粗大误差。2022-4-223| | 3ddvddv大连理工大学19 (2 2)粗大误差粗大误差的消除方法的消除方法粗大误差的消除方法主要有两条准则粗大误差的消除方法主要有两条准则: 第一第一,要适当选择粗大误差的判别准则,要适当选择粗大误差的判别准则; 第二第二,在存在多个粗大误差的情况下,应采用逐,在存在多个粗大误差的情况下,应采用逐步剔除的方法,通常先剔除含有最大粗大误差的步剔除的方法,通常先剔除含有最大粗大误差的数据,再依次进行判别和
15、剔除。数据,再依次进行判别和剔除。2022-4-22大连理工大学20 (1 1)随机误差的合成)随机误差的合成随机误差合成的随机误差合成的标准差:标准差:若各测量误差互不若各测量误差互不相关,则相关,则误差传播系数误差传播系数均为均为1 1,则,则8.2.5 8.2.5 误差误差的的合成合成(自行阅读)(自行阅读)2022-4-22211()2qqiiijijijiijaa a 21()qiiia21qii大连理工大学21 (2 2)系统误差的)系统误差的合成合成已定系统误差的已定系统误差的合成:合成: 已定系统误差(已定系统误差(fixed system errorfixed system
16、error)是指误差)是指误差的大小和符号均已确切掌握了的系统误差的大小和符号均已确切掌握了的系统误差。未定系统误差的未定系统误差的合成合成 仅知道其极限范围而未知其准确数值的系统误差仅知道其极限范围而未知其准确数值的系统误差称为未定称为未定系统误差。系统误差。2022-4-2211221NNNiiiyaaaa 2211qrijijsR大连理工大学22 误差的分配是误差合成的相反过程,即在给定测量结果允误差的分配是误差合成的相反过程,即在给定测量结果允许的总误差的条件下,如何合理确定各单项误差的问题,许的总误差的条件下,如何合理确定各单项误差的问题,就是误差的分配问题就是误差的分配问题。 误差
17、分配的一般原则误差分配的一般原则: 式中,式中, 表示表示总误差,总误差, 表示表示各单各单项误差。项误差。8.2.6 8.2.6 误差的分配误差的分配(自行阅读)(自行阅读)2022-4-2212222Nyyyyy,1,2,iyiiaiN8.3 测量测量不确定度的评定与不确定度的评定与估计估计(自行阅读)(自行阅读)大连理工大学232022-4-22大连理工大学24 (1 1)定义)定义测量不确定度测量不确定度(uncertainty of measurementuncertainty of measurement)是基)是基于误差理论所建立的概念,可以理解为对测量结果的可于误差理论所建立的
18、概念,可以理解为对测量结果的可信性、有效性的怀疑程度或不肯定程度信性、有效性的怀疑程度或不肯定程度。测量测量不确定度是与测量结果相关联的参数,用于表征不确定度是与测量结果相关联的参数,用于表征合理赋予被测量值的分散性。这里的合理赋予被测量值的分散性。这里的“合理合理”是指在随是指在随机状态的机状态的测量。测量。8.3.1 8.3.1 测量测量不确定度的基本概念不确定度的基本概念2022-4-22大连理工大学25 (2 2)测量不确定度与误差的同)测量不确定度与误差的同异异相同点:相同点:误差误差与不确定度二者都是由测量的系统效应和与不确定度二者都是由测量的系统效应和随机效应所引起的随机效应所引
19、起的。这些效应使得。这些效应使得被测量的被测量的真值无法确真值无法确知知,每个测量结果也就都具有一定的不可靠性,导致产,每个测量结果也就都具有一定的不可靠性,导致产生误差和不确定度。生误差和不确定度。不同点:不同点: 误差误差是相对于真值而言,是相对于真值而言,是测量值是测量值与真值与真值之差。之差。由于真值由于真值可能不可知,可能不可知,故误差也不可能得到准确值故误差也不可能得到准确值。 不确定度不确定度是是表示由于系统效应和随机效应的存在而对测量表示由于系统效应和随机效应的存在而对测量结果不能肯定的程度结果不能肯定的程度,表征,表征了被测量值可能出现的范围了被测量值可能出现的范围。 误差误
20、差和不确定度的取值不同。误差是一个差值,其符号或和不确定度的取值不同。误差是一个差值,其符号或正或负;测量不确定度是一个区间,其值恒为正值。正或负;测量不确定度是一个区间,其值恒为正值。2022-4-22大连理工大学26 (1 1)标准不确定度的)标准不确定度的A A类类评定评定标准不确定度的标准不确定度的A A类类评定采用评定采用统计分析的方法统计分析的方法进行进行评定。评定。其中,其中, 为标准不确定度,为标准不确定度, 为平均实验标准差,为平均实验标准差, 为样为样本标准差。本标准差。N N为测量次数。一般认为为测量次数。一般认为N5N5才才比较可靠。比较可靠。 (2 2)标准)标准不确
21、定度的不确定度的B B类类评定评定8.3.2 8.3.2 标准标准不确定度的评定不确定度的评定2022-4-22()( )( )isusN( )u( )s( )is大连理工大学27 合成合成若不确定度若不确定度相互相互独立:独立:若各分量的若各分量的影响是直接影响是直接的:的:8.3.3 8.3.3 测量不确定度的测量不确定度的合成合成2022-4-2222c11( )()2iijNNxijxxiijiijfffuyuu uxxx 22c1( )()iNxiifuyux 2c1( )()iNxiuyu其中,其中, 为直接测量值的标准不确定度,为直接测量值的标准不确定度, 为第为第i个个测量值与
22、第测量值与第j个个测量值之间的相关系数。测量值之间的相关系数。ixuij8.4 数据处理数据处理的最小二的最小二乘方乘方 法法(自行阅读(自行阅读)大连理工大学282022-4-22大连理工大学29 最小二乘的概念最小二乘的概念最小二乘法(最小二乘法(least square methodleast square method,又称最小平方法),又称最小平方法)是一种数学优化是一种数学优化方法;方法;它它通过最小化误差的平方和来寻找数据的最佳函数通过最小化误差的平方和来寻找数据的最佳函数匹配;匹配;是是一种在科学技术中得到广泛关注与应用的数据处理方一种在科学技术中得到广泛关注与应用的数据处理方
23、法法。利用利用最小二乘法可以简便地求得未知的数据,并使得这最小二乘法可以简便地求得未知的数据,并使得这些求得的数据与实际数据之间误差的平方和为最小些求得的数据与实际数据之间误差的平方和为最小。最小二乘法最小二乘法还可用于曲线拟合,其他一些优化问题也可还可用于曲线拟合,其他一些优化问题也可通过误差能量最小化或熵的最大化而用最小二乘法来表通过误差能量最小化或熵的最大化而用最小二乘法来表达。达。2022-4-22大连理工大学30 (1 1)问题描述)问题描述为了为了确定确定t t个个不可直接测量的未知量不可直接测量的未知量 的的估估计计 ,可可对对t t个个未知量有函数关系的直接测量未知量有函数关系
24、的直接测量量量 进行进行N N次次测量,得测量数据测量,得测量数据 ,并并设设:在在实际中,实际中,常常取取 ,为超定方程组,解,为超定方程组,解不唯一。如不唯一。如何由测量数据何由测量数据求最求最可可信赖解是信赖解是最小二乘法要解决的最小二乘法要解决的问题问题。8.4.1 8.4.1 最小二乘法基本原理最小二乘法基本原理(自行阅读)(自行阅读)2022-4-2212,tXXX12,txxxY12,Nlll1112221212(,)(,) (,)ttNNtYfXXXYfXXXYfXXXNt大连理工大学31 (2 2)最小二乘法)最小二乘法基本原理基本原理设直接测量量设直接测量量 的的估计量为估
25、计量为 ,有,有设测量数据的残差:设测量数据的残差:或称为残差方程:或称为残差方程:若测量无偏且误差独立、正态分布,标准差:若测量无偏且误差独立、正态分布,标准差:则各则各测量值出现在其真值附近的概率分别为测量值出现在其真值附近的概率分别为2022-4-2212,NYYY12,Nyyy1112221212(,)(,) (,)ttNNtyf xxxyfxxxyfxxx,1,2,iiivlyiN12(,),1,2,iiitvlf xxxiN12,N2221ed,1,2,2iiiiiPiN大连理工大学32由概率乘法性质,各测量数据同时出现在相应由概率乘法性质,各测量数据同时出现在相应区域的概区域的概
展开阅读全文