实验数据误差分析和数据处理.doc
- 格式:doc
- 大小:662.52 KB
- 文档页数:12
数据处理与误差分析报告1. 简介数据处理是科学研究和实验中不可或缺的一部分。
在进行实验和收集数据后,常常需要对数据进行处理和分析,从而揭示数据背后的规律和意义。
本报告将对数据处理的方法进行介绍,并分析误差来源和处理。
2. 数据处理方法2.1 数据清洗数据清洗是数据处理的第一步,用于去除无效数据、异常数据和重复数据。
通过筛选和校对,确保数据的准确性和一致性。
2.2 数据转换数据转换是将数据转化为适合分析的形式,通常包括数据的格式转换、单位转换和数据归一化等。
这样可以方便进行后续的分析和比较。
2.3 数据归约数据归约是对数据进行压缩和简化,以便于聚类、分类和预测分析。
常见的数据归约方法包括维度约简和特征选择等。
2.4 数据统计数据统计是对数据进行整体分析和总结,通常采用统计学的方法,包括均值、方差、标准差、相关系数等。
通过统计分析,可以从整体上了解和描述数据的特征和分布情况。
3. 误差来源和分析3.1 观测误差观测误差是由于测量和观测过程中的不确定性引起的误差。
观测误差可以分为系统误差和随机误差两种类型。
系统误差是由于仪器偏差、人为因素等引起的,通常具有一定的规律性;随机误差是由于种种不可预测的因素引起的,通常呈现为无规律的波动。
3.2 数据采集误差数据采集误差包括采样误差和非采样误差。
采样误差是由于采样过程中的抽样方法和样本大小等因素引起的误差;非采样误差是由于调查对象的选择、问卷设计的不合理等因素引起的误差。
采取合理的抽样策略和数据校正方法,可以减小这些误差。
3.3 数据处理误差数据处理误差是由于处理方法和算法的选择、参数设置的不合理等因素引起的误差。
不同的处理方法和算法可能会导致不同的结果,因此需要进行误差分析和对比,选择最合适的方法。
3.4 模型误差如果使用数学模型对数据进行分析和预测,模型误差是不可避免的。
模型误差主要是由于模型的简化、假设条件的不严谨等因素引起的。
通过对模型进行误差分析和验证,可以评估模型的可靠性和精度。
误差及数据处理物理实验离不开测量,数据测完后不进行处理,就难以判断实验效果,所以实验数据处理是物理实验非常重要的环节。
这节课我们学习误差及数据处理的知识。
数据处理及误差分析的内容很多,不可能在一两次学习中就完全掌握,因此希望大家首先对其基本内容做初步了解,然后在具体实验中通过实际运用加以掌握。
一、测量与误差1. 测量概念:将待测量与被选作为标准单位的物理量进行比较,其倍数即为物理量的测量值。
测量值:数值+单位。
分类:按方法可分为直接测量和间接测量;按条件可分为等精度测量和非等精度测量。
直接测量:可以用量具或仪表直接读出测量值的测量,如测量长度、时间等。
间接测量:利用直接测量的物理量与待测量之间的已知函数关系,通过计算而得到待测量的结果。
例如,要测量长方体的体积,可先直接测出长方体的长、宽和高的值,然后通过计算得出长方体的体积。
等精度测量:是指在测量条件完全相同(即同一观察者、同一仪器、同一方法和同一环境)情况下的重复测量。
非等精度测量:在测量条件不同(如观察者不同、或仪器改变、或方法改变,或环境变化)的情况下对同一物理量的重复测量。
2.误差真值A:我们把待测物理量的客观真实数值称为真值。
一般来说,真值仅是一个理想的概念。
实际测量中,一般只能根据测量值确定测量的最佳值,通常取多次重复测量的平均值作为最佳值。
误差ε:测量值与真值之间的差异。
误差可用绝对误差表示,也可用相对误差表示。
绝对误差=测量值-真值,反应了测量值偏离真值的大小和方向。
为了全面评价测量的优劣, 还需考虑被测量本身的大小。
绝对误差有时不能完全体现测量的优劣, 常用“相对误差”来表征测量优劣。
相对误差=绝对误差/测量的最佳值×100%分类:误差产生的原因是多方面的,根据误差的来源和性质的不同,可将其分为系统误差和随机误差两类。
(1)系统误差在相同条件下,多次测量同一物理量时,误差的大小和符号保持恒定,或按规律变化,这类误差称为系统误差。
第一章实验数据误差分析与数据处理第一节实验数据误差分析一、概述由于实验方法和实验设备的不完善,周围环境的影响,以及人的观察力,测量程序等限制,实验测量值和真值之间,总是存在一定的差异,在数值上即表现为误差;为了提高实验的精度,缩小实验观测值和真值之间的差值,需要对实验数据误差进行分析和讨论;实验数据误差分析并不是即成事实的消极措施,而是给研究人员提供参与科学实验的积极武器,通过误差分析,可以认清误差的来源及影响,使我们有可能预先确定导致实验总误差的最大组成因素,并设法排除数据中所包含的无效成分,进一步改进实验方案;实验误差分析也提醒我们注意主要误差来源,精心操作,使研究的准确度得以提高;二、实验误差的来源实验误差从总体上讲有实验装置包括标准器具、仪器仪表等、实验方法、实验环境、实验人员和被测量五个来源;1.实验装置误差测量装置是标准器具、仪器仪表和辅助设备的总体;实验装置误差是指由测量装置产生的测量误差;它来源于:1标准器具误差标准器具是指用以复现量值的计量器具;由于加工的限制,标准器复现的量值单位是有误差的;例如,标准刻线米尺的0刻线和1 000 mm刻线之间的实际长度与1 000 mm单位是有差异的;又如,标称值为1kg的砝码的实际质量真值并不等于1kg等等;2仪器仪表误差凡是用于被测量和复现计量单位的标准量进行比较的设备,称为仪器或仪表.它们将被测量转换成可直接观察的指示值;例如,温度计、电流表、压力表、干涉仪、天平,等等;由于仪器仪表在加工、装配和调试中,不可避免地存在误差,以致仪器仪表的指示值不等于被测量的真值,造成测量误差;例如,天平的两臂不可能加工、调整到绝对相等,称量时,按天平工作原理,天平平衡被认为两边的质量相等;但是,由于天平的不等臂,虽然天平达到平衡,但两边的质量并不等,即造成测量误差;3附件误差为测量创造必要条件或使测量方便地进行而采用的各种辅助设备或附件,均属测量附件;如电测量中的转换开关及移动测点、电源、热源和连接导线等均为测量附件,且均产生测量误差;又如,热工计量用的水槽,作为温度测量附件,提供测量水银温度计所需要的温场,由于水槽内各处温度的不均匀,便引起测量误差,等等;按装置误差具体形成原因,可分为结构性的装置误差、调整性的装置误差和变化性的装置误差;结构性的装置误差如:天平的不等臂,线纹尺刻线不均匀,量块工作面的不平行性,光学零件的光学性能缺陷,等等;这些误差大部分是由于制造工艺不完善和长期使用磨损引起的;调整性的装置误差如投影仪物镜放大倍数调整不准确,水平仪的零位调整不准确,千分尺的零位调整不准确,等等;这些误差是由于仪器仪表在使用时,未调整到理想状态引起的;变化性的装置误差如:激光波长的长期不稳定性,电阻等元器件的老化,晶体振荡器频率的长期漂移,等等;这些误差是由于仪器仪表随时间的不稳定性和随空间位置变化的不均匀性造成的;2.环境误差环境误差系指测量中由于各种环境因素造成的测量误差;被测量在不同的环境中测量,其结果是不同的;这一客观事实说明,环境对测量是有影响的,是测量的误差来源之一;环境造成测量误差的主要原因是测量装置包括标准器具、仪器仪表、测量附件同被测对象随着环境的变化而变化着;测量环境除了偏离标准环境产生测量误差以外,从而引起测量环境微观变化的测量误差;3.方法误差方法误差系指由于测量方法包括计算过程不完善而引起的误差;事实上,不存在不产生测量误差的尽善尽美的测量方法;由测量方法引起的测量误差主要有下列两种情况:第一种情况:由于测量人员的知识不足或研究不充分以致操作不合理,或对测量方法、测量程序进行错误的简化等引起的方法误差;第二种情况:分析处理数据时引起的方法误差;例如,轴的周长可以通过测量轴的直径d,然后由公式:L=πd计算得到;但是,在计算中只能取其近似值,因此,计算所得的L也只能是近似值,从而引起周长L的误差;4.人员误差人员误差系指测量人员由于生理机能的限制,固有习惯性偏差以及疏忽等原因造成的测量误差;由于测量人员在长时间的测量中,因疲劳或疏忽大意发生看错、读错、听错、记错等错误造成测量误差,这类误差往往相当大是测量所不容许的;为此,要求测量人员养成严格而谨慎的习惯,在测量中认真操作并集中精力,从制度上规定,对某些准确性较高而又重要的测量,由另一名测量人员进行复核测量;5.测量对象变化误差被测对象在整个测量过程中处在不断地变化中;由于测量对象自身的变化而引起的测量误差称为测量对象变化误差;例如,被测温度计的温度,被测线纹尺的长度,被测量块的尺寸等,在测量过程中均处于不停地变化中,由于它们的变化,使测量不准而带来误差;三、误差的分类误差是实验测量值包括间接测量值与真值客观存在的准确值之差别,误差可以分为下面三类:1. 系统误差由某些固定不变的因素引起的;在相同条件下进行多次测量,其误差的数值大小正负保持恒定,或误差随条件按一定规律变化;单纯增加实验次数是无法减少系统误差的影响,因为它在反复测定的情况下常保持同一数值与同一符号,故也称为常差;系统误差有固定的偏向和确定的规律,可按原因采取相应的措施给予校正或用公式消除;2. 随机误差偶然误差由一些不易控制的因素引起,如测量值的波动,肉眼观察误差等等;随机误差与系统误差不同,其误差的数值和符号不确定,它不能从实验中消除,但它服从统计规律,其误差与测量次数有关;随着测量次数的增加,出现的正负误差可以相互抵消,故多次测量的算术平均值接近于真值;3.过失误差由实验人员粗心大意,如读数错误,记录错误或操作失误引起;这类误差与正常值相差较大,应在整理数据时加以剔除;四、实验数据的真值与平均值1.真值真值是指某物理量客观存在的确定值,它通常是未知的;虽然真值是一个理想的概念,但对某一物理量经过无限多次的测量,出现的误差有正、有负,而正负误差出现的概率是相同的;因此,若不存在系统误差,它们的平均值相当接近于这一物理量的真值;故真值等于测量次数无限多时得到的算术平均值;由于实验工作中观测的次数是有限的,由此得出的平均值只能近似于真值,故称这个平均值为最佳值;2.平均值油气储运实验中常用的平均值有:1算术平均值设x,x,.,x为各次测量值, n 为测量次数,则算术平均值为:算术平均值是最常用的一种平均值,因为测定值的误差分布一般服从正态分布,可以证明算术平均值即为一组等精度测量的最佳值或最可信赖值;2均方根平均值3几何平均值五、误差的表示方法1.绝对误差测量值与真值之差的绝对值称为测量值的误差,即绝对误差;在实际工作中常以最佳值代替真值,测量值与最佳值之差称为残余误差,习惯上也称为绝对误差;设测量值用x 表示,真值用X 表示,则绝对误差D 为D=|X-x|如在实验中对物理量的测量只进行了一次,可根据测量仪器出厂鉴定书注明的误差,或取测量仪器最小刻度值的一半作为单次测量的误差;如某压力表精确度为级,即表明该仪表最大误差为相当档次最大量程的%,若最大量程为,该压力表的最大误差为:×%=如实验中最常用的U 形管压差计、转子流量计、秒表、量筒等仪表原则上均取其最小刻度值为最大误差,而取其最小刻度值的一半作为绝对误差计算值;2.相对误差绝对误差D 与真值的绝对值之比,称为相对误差:式中真值X 一般为未知,用平均值代替;3.算术平均误差算术平均误差的定义为:x——测量值,i=1,2,3, .,n ;d——测量值与算术平均值x 之差的绝对值,d= x x i . ;4.标准误差均方误差对有限测量次数,标准误差表示为:标准误差是目前最常用的一种表示精确度的方法,它不但与一系列测量值中的每个数据有关,而且对其中较大的误差或较小的误差敏感性很强,能较好地反映实验数据的精确度,实验愈精确,其标准误差愈小;六、精密度、正确度和准确度1、精密度精密度是指对同一被测量作多次重复测量时,各次测量值之间彼此接近或分散的程度;它是对随机误差的描述,它反映随机误差对测量的影响程度;随机误差小,测量的精密度就高;如果实验的相对误差为%且误差由随机误差引起,则可以认为精密度为10-4;2、正确度正确度是指被测量的总体平均值与其真值接近或偏离的程度;它是对系统误差的描述,它反映系统误差对测量的影响程度;系统误差小,测量的正确度就高;如果实验的相对误差为%且误差由系统误差引起,则可以认为正确度为10-4;3、准确度准确度是指各测量值之间的接近程度和其总体平均值对真值的接近程度;它包括了精密度和正确度两方面的含义;它反映随机误差和系统误差对测量的综合影响程度;只有随机误差和系统误差都非常小,才能说测量的准确度高;若实验的相对误差为%且误差由系统误差和随机误差共同引起,则可以认为精确度为10-4;七、实验数据的有效数与记数法任何测量结果或计算的量,总是表现为数字,而这些数字就代表了欲测量的近似值;究竟对这些近似值应该取多少位数合适呢应根据测量仪表的精度来确定,一般应记录到仪表最小刻度的十分之一位;例如:某液面计标尺的最小分度为1mm,则读数可以到;如在测定时液位高在刻度524mm 与525mm 的中间,则应记液面高为,其中前三位是直接读出的,是准确的,最后一位是估计的,是欠准的,该数据为4 位有效数;如液位恰在524mm刻度上,该数据应记为,若记为524mm,则失去一位末位欠准数字;总之,有效数中应有而且只能有一位末位欠准数字;由上可见,当液位高度为时,最大误差为±,也就是说误差为末位的一半;在科学与工程中,为了清楚地表达有效数或数据的精度,通常将有效数写出并在第一位数后加小数点,而数值的数量级由10 的整数幂来确定,这种以10 的整数幂来记数的方法称科学记数法;例如:应记为×10-3,88000有效数3 位记为×104;应注意科学记数法中,在10 的整数幂之前的数字应全部为有效数;有效数字进行运算时,运算结果仍为有效数字;总的规则是:可靠数字与可靠数字运算后仍为可靠数字,可疑数字与可疑数字运算后仍为可疑数字,可靠数字与可疑数字运算后为可疑数字,进位数可视为可靠数字;对于已经给出了不确定度的有效数字,在运算时应先计算出运算结果的不确定度,然后根据它决定结果的有效数字位数;加减运算规则:A.如果已知参与加减运算的各有效数字的不确定度,则先算出计算结果的不确定度,并保留1-2位,然后确定计算结果的有效位数;B.如果没给出参与加减运算的各有效数字的不确定度,则先找出可疑位最高的那个有效数字,计算结果的可疑位应与该有效数字的可疑位对齐;乘除运算规则若干个有效数字相乘除时,计算结果积或商的有效数字位数在大多数情况下与参与运算的有效数字位数最少的那个分量的有效位数相同; 乘方、开方运算规则有效数字在乘方或开方时,若乘方或开方的次数不太高,其结果的有效数字位数与原底数的有效数字位数相同; 对数运算规则有效数字在取对数时,其有效数字的位数与真数的有效数字位数相同或多取1位;第二节 实验数据处理基本方法数据处理是指从获得数据开始到得出最后结论的整个加工过程,包括数据记录、整理、计算、分析和绘制图表等;数据处理是实验工作的重要内容,涉及的内容很多,这里仅介绍一些基本的数据处理方法; 一、列表法对一个物理量进行多次测量或研究几个量之间的关系时,往往借助于列表法把实验数据列成表格;其优点是,使大量数据表达清晰醒目,条理化,易于检查数据和发现问题,避免差错,同时有助于反映出物理量之间的对应关系;所以,设计一个简明醒目、合理美观的数据表格,是每一个同学都要掌握的基本技能;列表没有统一的格式,但所设计的表格要能充分反映上述优点,应注意以下几点: 1.各栏目均应注明所记录的物理量的名称符号和单位;2.栏目的顺序应充分注意数据间的联系和计算顺序,力求简明、齐全、有条理;3.表中的原始测量数据应正确反映有效数字,数据不应随便涂改,确实要修改数据时,应将原来数据画条杠以备随时查验;4.对于函数关系的数据表格,应按自变量由小到大或由大到小的顺序排列,以便于判断和处理; 二、图解法图线能够直观地表示实验数据间的关系,找出物理规律,因此图解法是数据处理的重要方法之一;图解法处理数据,首先要画出合乎规范的图线,其要点如下:1.选择图纸 作图纸有直角坐标纸即毫米方格纸、对数坐标纸和极坐标纸等,根据作图需要选择;在物理实验中比较常用的是毫米方格纸,其规格多为cm 2517⨯;2.曲线改直 由于直线最易描绘,且直线方程的两个参数斜率和截距也较易算得;所以对于两个变量之间的函数关系是非线性的情形,在用图解法时应尽可能通过变量代换将非线性的函数曲线转变为线性函数的直线;下面为几种常用的变换方法;1c xy =c 为常数;令xz 1=,则cz y =,即y 与z 为线性关系; 2y c x =c 为常数;令2x z =,则z cy 21=,即y 与z 为线性关系;3b ax y =a 和b 为常数;等式两边取对数得,x b a y lg lg lg +=;于是,y lg 与x lg 为线性关系,b 为斜率,a lg 为截距;4bx ae y =a 和b 为常数;等式两边取自然对数得,bx a y +=ln ln ;于是,y ln 与x 为线性关系,b 为斜率,a ln 为截距;3.确定坐标比例与标度 合理选择坐标比例是作图法的关键所在;作图时通常以自变量作横坐标x 轴,因变量作纵坐标y 轴;坐标轴确定后,用粗实线在坐标纸上描出坐标轴,并注明坐标轴所代表物理量的符号和单位;坐标比例是指坐标轴上单位长度通常为cm 1所代表的物理量大小;坐标比例的选取应注意以下几点:1原则上做到数据中的可靠数字在图上应是可靠的,即坐标轴上的最小分度m m 1对应于实验数据的最后一位准确数字;坐标比例选得过大会损害数据的准确度;2坐标比例的选取应以便于读数为原则,常用的比例为“1∶1”、“1∶2”、“1∶5”包括“1∶”、“1∶10”…,即每厘米代表“1、2、5”倍率单位的物理量;切勿采用复杂的比例关系,如“1∶3”、“1∶7”、“1∶9”等;这样不但不易绘图,而且读数困难;坐标比例确定后,应对坐标轴进行标度,即在坐标轴上均匀地一般每隔cm 2标出所代表物理量的整齐数值,标记所用的有效数字位数应与实验数据的有效数字位数相同;标度不一定从零开始,一般用小于实验数据最小值的某一数作为坐标轴的起始点,用大于实验数据最大值的某一数作为终点,这样图纸可以被充分利用;4.数据点的标出 实验数据点在图纸上用“+”符号标出,符号的交叉点正是数据点的位置;若在同一张图上作几条实验曲线,各条曲线的实验数据点应该用不同符号如×、⊙等标出,以示区别;5.曲线的描绘 由实验数据点描绘出平滑的实验曲线,连线要用透明直尺或三角板、曲线板等拟合;根据随机误差理论,实验数据应均匀分布在曲线两侧,与曲线的距离尽可能小;个别偏离曲线较远的点,应检查标点是否错误,若无误表明该点可能是错误数据,在连线时不予考虑;对于仪器仪表的校准曲线和定标曲线,连接时应将相邻的两点连成直线,整个曲线呈折线形状;6.注解与说明 在图纸上要写明图线的名称、坐标比例及必要的说明主要指实验条件,并在恰当地方注明作者姓名、日期等;7.直线图解法求待定常数 直线图解法首先是求出斜率和截距,进而得出完整的线性方程;其步骤如下:1选点;在直线上紧靠实验数据两个端点内侧取两点),(11y x A 、22,(y x B ,并用不同于实验数据的符号标明,在符号旁边注明其坐标值注意有效数字;若选取的两点距离较近,计算斜率时会减少有效数字的位数;这两点既不能在实验数据范围以外取点,因为它已无实验根据,也不能直接使用原始测量数据点计算斜率;2求斜率;设直线方程为bx a y +=,则斜率为1212x x y y b --=1-5-13求截距;截距的计算公式为11bx y a -= 1-5-2三、逐差法当两个变量之间存在线性关系,且自变量为等差级数变化的情况下,用逐差法处理数据,既能充分利用实验数据,又具有减小误差的效果;具体做法是将测量得到的偶数组数据分成前后两组,将对应项分别相减,然后再求平均值;例如,在弹性限度内,弹簧的伸长量x 与所受的载荷拉力F 满足线性关系kx F =实验时等差地改变载荷,测得一组实验数据如下表:求每增加1Kg 砝码弹簧的平均伸长量x ∆;若不加思考进行逐项相减,很自然会采用下列公式计算[])(71)()()(7118782312x x x x x x x x x -=-++-+-=∆ 结果发现除1x 和8x 外,其它中间测量值都未用上,它与一次增加7个砝码的单次测量等价;若用多项间隔逐差,即将上述数据分成前后两组,前一组),,,(4321x x x x ,后一组),,,(8765x x x x ,然后对应项相减求平均,即[])()()()(44148372615x x x x x x x x x -+-+-+-⨯=∆ 这样全部测量数据都用上,保持了多次测量的优点,减少了随机误差,计算结果比前面的要准确些;逐差法计算简便,特别是在检查具有线性关系的数据时,可随时“逐差验证”,及时发现数据规律或错误数据; 四、最小二乘法由一组实验数据拟合出一条最佳直线,常用的方法是最小二乘法;设物理量y 和x 之间的满足线性关系,则函数形式为bx a y +=最小二乘法就是要用实验数据来确定方程中的待定常数a 和b ,即直线的斜率和截距;我们讨论最简单的情况,即每个测量值都是等精度的,且假定x 和y 值中只有y 有明显的测量随机误差;如果x 和y 均有误差,只要把误差相对较小的变量作为x 即可;由实验测量得到一组数据为),2,1;,(n i y x i i =,其中i x x =时对应的i y y =;由于测量总是有误差的,我们将这些误差归结为i y 的测量偏差,并记为1ε,2ε,…,n ε,见图1-5-2;这样,将实验数据),(i i y x 代入方程bx a y +=后,得到⎪⎪⎭⎪⎪⎬⎫=+-=+-=+-n n n bx a y bx a y bx a y εεε)()()(222111我们要利用上述的方程组来确定a 和b ,那么a 和b 要满足什么要求呢 显然,比较合理的a 和b 是使1ε,2ε,…,n ε数值上都比较小;但是,每次测量的误差不会相同,反映在1ε,2ε,…,n ε大小不一,而且符号也不尽相同;所以只能要求总的偏差最小,即min 21→∑=i ni ε 令 2121)(i in i i ni bx a yS --==∑∑==ε使S 为最小的条件是0=∂∂a S ,0=∂∂bS ,022>∂∂a S ,022>∂∂b S由一阶微商为零得y⎪⎪⎭⎪⎪⎬⎫=--∑-=∂∂=--∑-=∂∂==0)(20)(211i i i n i i i n i x bx a y b Sbx a y aS 解得 212112111)(i ni i ni ini i ni i i n i i n i x n x y x y x x a ======∑-⎪⎭⎫ ⎝⎛∑∑∑-∑∑=1-5-32121111)(ini i ni i i ni i ni i ni x n x y x n y x b =====∑-⎪⎭⎫ ⎝⎛∑∑-∑∑=1-5-4令111x n x n i =∑=,i n i y n y 11=∑=,21121⎪⎭⎫⎝⎛∑==x n x n i ,2121i n i x n x =∑=,)(111i n i y x n xy =∑=,则x b y a -= 1-5-5 22xx xyy x b --⋅=1-5-6如果实验是在已知y 和x 满足线性关系下进行的,那么用上述最小二乘法线性拟合又称一元线性回归可解得斜率a 和截距b ,从而得出回归方程bx a y +=;如果实验是要通过对x 、y 的测量来寻找经验公式,则还应判断由上述一元线性拟合所确定的线性回归方程是否恰当;这可用下列相关系数r 来判别))((2222y y x x yx xy r --⋅-= 1-5-7其中21121⎪⎭⎫ ⎝⎛∑==y n y n i ,2121i n i y n y =∑=;可以证明,||r 值总是在0和1之间;||r 值越接近1,说明实验数据点密集地分布在所拟合的直线的近旁,用线性函数进行回归是合适的;1||=r 表示变量x 、y 完全线性相关,拟合直线通过全部实验数据点;||r 值越小线性越差,一般9.0||≥r 时可认为两个物理量之间存在较密切的线性关系,此时用最小二乘法直线拟合才有实际意义;。
数据处理及误差分析1. 引言数据处理及误差分析是科学研究和工程实践中一个至关重要的领域。
在收集和处理数据的过程中,往往会受到各种因素的干扰和误差的影响。
因此,正确地处理这些数据并进行误差分析,对于准确得出结论和进行科学决策至关重要。
2. 数据处理数据处理是指对收集到的数据进行整理、分析和解释的过程。
它包括了数据清洗、数据转换、数据提取和数据集成等步骤。
2.1 数据清洗数据清洗是指对原始数据进行筛选、剔除异常值和填充缺失值等处理。
清洗后的数据更加可靠和准确,能够更好地反映实际情况。
2.2 数据转换数据转换主要是将原始数据转化为符合分析需求的形式。
比如,将连续型数据离散化、进行数据标准化等。
2.3 数据提取数据提取是指从庞大的数据集中挑选出有意义和相关的数据进行分析。
通过合理选择变量和提取特征,可以提高数据分析的效率和准确性。
2.4 数据集成数据集成是指将来自不同数据源的数据进行整合和合并,以满足分析需求。
通过数据集成,可以获得更全面、更综合的数据集,提高分析结果的可信度。
3. 误差分析误差分析是对数据处理过程中产生的误差进行评估和分析。
误差可以分为系统误差和随机误差两种类型。
3.1 系统误差系统误差是由于数据收集和处理过程中的系统性偏差导致的。
它们可能是由于仪器精度不高、实验环境变化等原因引起的。
系统误差一般是可纠正的,但要确保误差产生的原因被消除或减小。
3.2 随机误差随机误差是由于抽样误差、观察误差等随机因素导致的。
它们是不可预测和不可消除的,只能通过多次重复实验和统计方法进行分析和控制。
4. 误差分析方法误差分析通常采用统计学和数学方法进行。
其中,常用的方法有误差传递法、误差平均法、误差椭圆法等。
4.1 误差传递法误差传递法是将各个步骤中产生的误差逐步传递,最终计算出整个数据处理过程中的总误差。
它能够帮助我们了解每个步骤对最终结果的影响程度,并找出影响结果准确性的关键因素。
4.2 误差平均法误差平均法是通过多次实验重复测量,并计算平均值来减小随机误差的影响。
第二章实验数据误差分析和数据处理第一节实验数据的误差分析由于实验方法和实验设备的不完善,周围环境的影响,以及人的观察力,测量程序等限制,实验观测值和真值之间,总是存在一定的差异。
人们常用绝对误差、相对误差或有效数字来说明一个近似值的准确程度。
为了评定实验数据的精确性或误差,认清误差的来源及其影响,需要对实验的误差进行分析和讨论。
由此可以判定哪些因素是影响实验精确度的主要方面,从而在以后实验中,进一步改进实验方案,缩小实验观测值和真值之间的差值,提高实验的精确性。
一、误差的基本概念测量是人类认识事物本质所不可缺少的手段。
通过测量和实验能使人们对事物获得定量的概念和发现事物的规律性。
科学上很多新的发现和突破都是以实验测量为基础的。
测量就是用实验的方法,将被测物理量与所选用作为标准的同类量进行比较,从而确定它的大小。
1.真值与平均值真值是待测物理量客观存在的确定值,也称理论值或定义值。
通常真值是无法测得的。
若在实验中,测量的次数无限多时,根据误差的分布定律,正负误差的出现几率相等。
再经过细致地消除系统误差,将测量值加以平均,可以获得非常接近于真值的数值。
但是实际上实验测量的次数总是有限的。
用有限测量值求得的平均值只能是近似真值,常用的平均值有下列几种:(1) 算术平均值 算术平均值是最常见的一种平均值。
设1x 、2x 、……、n x 为各次测量值,n 代表测量次数,则算术平均值为nx n x x x x ni in ∑==+⋅⋅⋅++=121(2-1)(2) 几何平均值 几何平均值是将一组n 个测量值连乘并开n 次方求得的平均值。
即n nx x x x ⋅⋅⋅⋅=21几(2-2)(3)均方根平均值 nxnxx x x ni in∑==+⋅⋅⋅++=1222221均(2-3)(4) 对数平均值 在化学反应、热量和质量传递中,其分布曲线多具有对数的特性,在这种情况下表征平均值常用对数平均值。
设两个量1x 、2x ,其对数平均值21212121lnln ln x x x x x x x x x -=--=对(2-4)应指出,变量的对数平均值总小于算术平均值。
第二章实验数据误差分析和数据处理第一节实验数据的误差分析由于实验方法和实验设备的不完善,周围环境的影响,以及人的观察力,测量程序等限制,实验观测值和真值之间,总是存在一定的差异。
人们常用绝对误差、相对误差或有效数字来说明一个近似值的准确程度。
为了评定实验数据的精确性或误差,认清误差的来源及其影响,需要对实验的误差进行分析和讨论。
由此可以判定哪些因素是影响实验精确度的主要方面,从而在以后实验中,进一步改进实验方案,缩小实验观测值和真值之间的差值,提高实验的精确性。
一、误差的基本概念测量是人类认识事物本质所不可缺少的手段。
通过测量和实验能使人们对事物获得定量的概念和发现事物的规律性。
科学上很多新的发现和突破都是以实验测量为基础的。
测量就是用实验的方法,将被测物理量与所选用作为标准的同类量进行比较,从而确定它的大小。
1. 真值与平均值真值是待测物理量客观存在的确定值,也称理论值或定义值。
通常真值是无法测得的。
若在实验中,测量的次数无限多时,根据误差的分布定律,正负误差的出现几率相等。
再经过细致地消除系统误差,将测量值加以平均,可以获得非常接近于真值的数值。
但是实际上实验测 量的次数总是有限的。
用有限测量值求得的平均值只能是近似真值,常用的平均值有下列几种:(1) 算术平均值 算术平均值是最常见的一种平均值。
设 x 1 、 x 2 、 、 x n 为各次测量值, n 代表测量次数,则算术平均值为nx 1 xx n ix i(2-1)x 21nn(2) 几何平均值几何平均值是将一组 n 个测量值连乘并开 n 次方求得的平均值。
即x 几nx 1 x 2x n(2-2)(3)均方根平均值n22x 22x ix 均x 1 2x ni 1(2-3)nn(4) 对数平均值 在化学反应、热量和质量传递中,其分布曲线多具有对数的特性,在这种情况下表征平均值常用对数平均值。
设两个量 x 1 、 x 2 ,其对数平均值x 对x 1 x 2 x 1 x 2(2-4)ln x 1 ln x 2x 1lnx 2应指出,变量的对数平均值总小于算术平均值。
当 x1/ x2≤2时,可以用算术平均值代替对数平均值。
当 x1/ x2=2,x对=1.443,x1.50, (x对-x)/x对=4.2%,即 x1/ x2≤2,引起的误差不超过 4.2%。
以上介绍各平均值的目的是要从一组测定值中找出最接近真值的那个值。
在化工实验和科学研究中,数据的分布较多属于正态分布,所以通常采用算术平均值。
2.误差的分类根据误差的性质和产生的原因,一般分为三类:(1)系统误差系统误差是指在测量和实验中未发觉或未确认的因素所引起的误差,而这些因素影响结果永远朝一个方向偏移,其大小及符号在同一组实验测定中完全相同,当实验条件一经确定,系统误差就获得一个客观上的恒定值。
当改变实验条件时,就能发现系统误差的变化规律。
系统误差产生的原因:测量仪器不良,如刻度不准,仪表零点未校正或标准表本身存在偏差等;周围环境的改变,如温度、压力、湿度等偏离校准值;实验人员的习惯和偏向,如读数偏高或偏低等引起的误差。
针对仪器的缺点、外界条件变化影响的大小、个人的偏向,待分别加以校正后,系统误差是可以清除的。
(2)偶然误差在已消除系统误差的一切量值的观测中,所测数据仍在末一位或末两位数字上有差别,而且它们的绝对值和符号的变化,时而大时而小,时正时负,没有确定的规律,这类误差称为偶然误差或随机误差。
偶然误差产生的原因不明,因而无法控制和补偿。
但是,倘若对某一量值作足够多次的等精度测量后,就会发现偶然误差完全服从统计规律,误差的大小或正负的出现完全由概率决定。
因此,随着测量次数的增加,随机误差的算术平均值趋近于零,所以多次测量结果的算数平均值将更接近于真值。
(3)过失误差过失误差是一种显然与事实不符的误差,它往往是由于实验人员粗心大意、过度疲劳和操作不正确等原因引起的。
此类误差无规则可寻,只要加强责任感、多方警惕、细心操作,过失误差是可以避免的。
3、精密度、准确度和精确度反映测量结果与真实值接近程度的量,称为精度(亦称精确度)。
它与误差大小相对应,测量的精度越高,其测量误差就越小。
“精度”应包括精密度和准确度两层含义。
(1)精密度:测量中所测得数值重现性的程度,称为精密度。
它反映偶然误差的影响程度,精密度高就表示偶然误差小。
(2)准确度测量值与真值的偏移程度,称为准确度。
它反映系统误差的影响精度,准确度高就表示系统误差小。
(3)精确度(精度)它反映测量中所有系统误差和偶然误差综合的影响程度。
在一组测量中,精密度高的准确度不一定高,准确度高的精密度也不一定高,但精确度高,则精密度和准确度都高。
为了说明精密度与准确度的区别,可用下述打靶子例子来说明。
如图2-1 所示。
图 2-1(a) 中表示精密度和准确度都很好,则精确度高;图2-1(b) 表示精密度很好,但准确度却不高;图2-1(c) 表示精密度与准确度都不好。
在实际测量中没有像靶心那样明确的真值,而是设法去测定这个未知的真值。
学生在实验过程中,往往满足于实验数据的重现性,而忽略了数据测量值的准确程度。
绝对真值是不可知的,人们只能订出一些国际标准作为测量仪表准确性的参考标准。
随着人类认识运动的推移和发展,可以逐步逼近绝对真值。
(a )(b )(c )图 2-1精密度和准确度的关系4、误差的表示方法利用任何量具或仪器进行测量时,总存在误差,测量结果总不可能准确地等于被测量的真值,而只是它的近似值。
测量的质量高低以测量精确度作指标,根据测量误差的大小来估计测量的精确度。
测量结果的误差愈小,则认为测量就愈精确。
(1)绝对误差测量值 X 和真值 A 0 之差为绝对误差,通常称为误差。
记为:DXA 0(2-5)由于真值 A 0 一般无法求得,因而上式只有理论意义。
常用高一级标准仪器的示值作为实际 值 A 以代替真值 A 0 。
由于高一级标准仪器存在较小的误差,因而A 不等于 A 0 ,但总比 X 更接近于 A 0 。
X 与 A 之差称为仪器的示值绝对误差。
记为d X A(2-6)与 d 相反的数称为修正值,记为CdA X(2-7)通过检定,可以由高一级标准仪器给出被检仪器的修正值 C 。
利用修正值便可以求出该仪器的实际值 A 。
即A X C(2-8)(2)相对误差衡量某一测量值的准确程度,一般用相对误差来表示。
示值绝对误差d与被测量的实际值 A 的百分比值称为实际相对误差。
记为d100%(2-9)AA以仪器的示值 X 代替实际值 A 的相对误差称为示值相对误差。
记为Xd 100%(2-10)X一般来说,除了某些理论分析外,用示值相对误差较为适宜。
( 3)引用误差 为了计算和划分仪表精确度等级,提出引用误差概念。
其定义为仪表示值的绝对误差与量程范围之比。
示值绝对误差 d (2-11)A100%X n 100%量程范围d --示值绝对误差;X n--标尺上限值 - 标尺下限值。
(4)算术平均误差算术平均误差是各个测量点的误差的平均值。
d i平ni 1, 2, , n(2-12)n —测量次数; d i —为第 i 次测量的误差。
(5)标准误差标准误差亦称为均方根误差。
其定义为d i2(2-13)n上式使用于无限测量的场合。
实际测量工作中,测量次数是有限的,则改用下式d i 2 (2-14)n 1标准误差不是一个具体的误差,的大小只说明在一定条件下等精度测量集合所属的每一个观测值对其算术平均值的分散程度,如果 的值愈小则说明每一次测量值对其算术平均值分散度就小,测量的精度就高,反之精度就低。
在化工原理实验中最常用的 U 形管压差计、转子流量计、秒表、量筒、电压等仪表原则上 均取其最小刻度值为最大误差,而取其最小刻度值的一半作为绝对误差计算值。
5、测量仪表精确度测量仪表的精确等级是用最大引用误差(又称允许误差)来标明的。
它等于仪表示值中的最大绝对误差与仪表的量程范围之比的百分数。
最大示值绝对误差d max (2-15)n max量程范围100%100%X n式中: δmax ——仪表的最大测量引用误差;d max ——仪表示值的最大绝对误差;X n ——标尺上限值—标尺下限值。
通常情况下是用标准仪表校验较低级的仪表。
所以,最大示值绝对误差就是被校表与标准表之间的最大绝对误差。
测量仪表的精度等级是国家统一规定的,把允许误差中的百分号去掉,剩下的数字就称为仪表的精度等级。
仪表的精度等级常以圆圈内的数字标明在仪表的面板上。
例如某台压力计的允许误差为 1.5%,这台压力计电工仪表的精度等级就是 1.5 ,通常简称 1.5 级仪表。
仪表的精度等级为 a ,它表明仪表在正常工作条件下,其最大引用误差的绝对值 δmax 不能超过的界限,即d max 100 % a %(2-16)n maxX n由式 (2-16) 可知,在应用仪表进行测量时所能产生的最大绝对误差(简称误差限)为d max a% X n(2-17)而用仪表测量的最大值相对误差为dmaxX n(2-18)n maxX n a %X由上式可以看出,用只是仪表测量某一被测量所能产生的最大示值相对误差,不会超过仪表允许误差a% 乘以仪表测量上限 X n 与测量值 X 的比。
在实际测量中为可靠起见,可用下式对仪表的测量误差进行估计,即m a% X n(2-19)X[ 例 2-1]用量限为5A,精度为 0.5 级的电流表,分别测量两个电流,I 1 =5A,I 2 =2.5A, 试求测量 I 1和 I 2的相对误差为多少?m1 m 2I n0.5%5a% 0.5% I1 5I n0.5% 5a % 1.0%I 2 2 .5由此可见,当仪表的精度等级选定时,所选仪表的测量上限越接近被测量的值,则测量的误差的绝对值越小。
[ 例 2-2] 欲测量约 90V 的电压,实验室现有 0.5 级 0-300V 和 1.0 级 0-100V 的电压表。
问选用哪一种电压表进行测量为好?用 0.5 级 0-300V 的电压表测量 90V的相对误差为m0 .5 a1%Un 0.5% 300 1.7%U 90用 1.0 级 0-100V 的电压表测量 90V的相对误差为m1 .0 a2 %Un 1.0% 100 1.1%U 90上例说明,如果选择得当,用量程范围适当的 1.0 级仪表进行测量,能得到比用量程范围大的0.5 级仪表更准确的结果。
因此,在选用仪表时,应根据被测量值的大小,在满足被测量数值范围的前提下,尽可能选择量程小的仪表,并使测量值大于所选仪表满刻度的三分之二,即 X>2X n/3 。
这样就可以达到满足测量误差要求,又可以选择精度等级较低的测量仪表,从而降低仪表的成本。
二、有效数字及其运算规则在科学与工程中,该用几位有效数字来表示测量或计算结果,总是以一定位数的数字来表示。