128《统计案例》知识点总结

  • 格式:doc
  • 大小:1.12 MB
  • 文档页数:7

基础--综合--能力--创新 1 统计案例 一.回归分析的基本思想及其初步应用: ㈠回归分析的定义:我们知道,函数关系是一种确定性关系,而相关关系是一种非确定性关系。回归分析就是对具有相关关系的两个变量进行统计分析的一种常用关系。

㈡对具有相关关系的两个变量进行统计分析的步骤为: 1)画散点图; 2)求回归直线方程; 3)用回归直线方程进行预报

㈢样本中心:对于一组具有线性相关关系的数据





xbyaxnxyxnyxxxyyxxbniiniiiniiniii,)())((

1221121其中niixnx11,

niiyny1

1

称为样本点的中心,回归直线过样本点的中心),(yx。回归直线方程为: ㈣线性回归模型:由于两个变量组成的所有样本点不共线,而只是散步在一条直线的附近,所以常用线性回归

模型eaxby.来表示。这里的ab;为模型的未知参数,e是y与bx+a之间的误差。

1)通常e为随机变量,称为随机误差。它的均值,0)(eE方差2)(eD. 与函数关系不同,在回归模型中,y的值由x和随机因素e共同确定,即x只能解释部分y的变化,因此我们把x称为解释变量,把y称为预报变量。 2)线性回归模型的完整表达式为:

随机误差e的方差越小,用bx+a预报真实值y的精度越高。随机误差是引起预报值与真实值y之间存在误差的原因之一,其大小取决于随机误差的方差。 另一方面,和为斜率和截距的估计值,它们与真实值a和b之间也存在误差,这种误差是引起预报值与真实值y之间存在误差的另一个原因。 ㈤残差:在线性回归模型中,e是用axb.预报真实值y时产生的随机误差,它是一个不可观测的

量。实际应用中,我们用回归方程axbyˆ.ˆˆ中的yˆ来估计abx,由于随机误差

).(axbye,所以称是随机误差e的估计量。对于样本点)...,)(,(2211yxyx),(nnyx 基础--综合--能力--创新 2 而言,它们的随机误差为;...2,1,niabxyeiii 随机误差估计值为;...2,1,ˆˆˆˆniaxbyyyeiiiii

ieˆ称为相应于点的残差。注意:与偏差yyi区别开来。

㈥残差图: 可以通过残差发现原始数据中的可疑数据,从而判断所建立模型的拟合效果。可以利用图形来分析残差特性,作图时以残差为纵坐标,横坐标为样本编号(或身高数据或体重数据)这样作出的图形叫做残差图。 1)注意检查残差较大的样本点,确认采集该样本点过程中是否有人为错误.如果数据采集有错误,应予以纠正,再重新利用线性回归模型拟合数据;如果没有错误,则需寻找其它原因。 2)残差图中,当残差点比较均匀地落在水平的带状区域中时,就说明选用的模型比较合适。这样的带状区域的宽度越窄,说明模型拟合精度越高,回归方程的预报精度越高。

3)另外,还可以用niiniiiyyyyR12122)()ˆ(1来刻画回归效果。对于已经获取的样本数据,2R表达式

中分母“偏差平方和”niiyy12)(是一个确定的数。 因此越大,意味着残差平方和niiiyy12)ˆ(越小,即模型拟合效果越好;越小,残差平方和越大,即模型拟合效果越差。在线性回归模型中,表示解释变量对于预报变量变化的贡献率,越接近于1,表示回归的效果越好。是常用的选用模型的指标之一,在实际应用中,应该尽量选择较大的回归模型。 ㈦一般地,建立回归模型的基本步骤:

⑴确定研究对象,明确哪个变量是解释变量,哪个变量是预报变量y;

⑵画出解释变量x和预报变量y的散点图,观察它们之间的关系(如是否存在线性关系等) ⑶由经验确定回归方程的类型(如我们观察到数据呈线性关系,则选用线性回归方程) ⑷按一定规则(如最小二乘法)估计回归方程中的参数; ⑸得出结果后分析残差图是否有异常(如个别数据对应残差过大,残差呈现不随机的规律性等)。若存在异常,则检查数据是否有误,或模型是否合适等。 ㈧回归模型的适用范围:

⑴回归方程只适用于我们所研究的样本的总体; ⑵我们所建立的回归方程一般都有时间性; ⑶样本取值的范围会影响回归方程的适用范围; ⑷不能期望回归方程得到的预报值就是预报变量的精确值。 ㈨一般地,比较两个函数模型的拟合程度的步骤如下: 基础--综合--能力--创新 3 ⑴分别建立对应于两个模型的回归方程与, 即模型112)(,0)(),(eDeEeaxfy和模型222)(,0)(),(DEbxgy其中和分别是参数a和b的估计值 ⑵分别计算两个模型的R2值

⑶若,则模型1比模型2拟合效果更好;若,则模型2比模型1拟合效果更好。

㈩相关系数与相关性检验: 散点图虽然能帮助我们观察两个变量之间的线性相关关系,但在实际应用中很难说这些点是不

是分布在某条直线附近。鉴于此,我们必须对x与y作线性相关检验,简称相关性检验。

对于变量x与y随机抽取到的n对数据)...,)(,(2211yxyx),(nnyx

,样本的相关系数为:

)()(.))(())(())((122122111221niiniiniiininiiiniiiynyxnxyxnyxyyxxyyxxr

相关系数公式的作用在于:对一组数据之间的线性相关程度作出定量的分析,而不是仅凭画出散点图,肉眼直观地从散点图上的形状粗浅地得出数据之间的线性相关程度。 1)相关系数r具有下列性质:

⑴;1r⑵r的越接近于1,线性相关程度越强;⑶r的越接近于0,线性相关程度越弱 2)相关性检验的步骤: .1step作统计假设:x与y不具有线性相关关系;

.2step根据小概率0.05与2n在附表中查出r的一个临界值05.0r; .3step根据样本相关系数公式计算出r的值; .4step做统计推断:如果05.0rr,这是表明有%95的把握认为:x与y具有线性相关关系; 如果05.0rr,这是表明假设成立,认为:x与y不具有线性相关关系,所求的回归直线方程是毫无意义的。

二.独立性检验的基本思想及其初步应用: ㈠不同的“值”表示个体所属不同类别,这样的变量叫做分类变量。

㈡列联表:列出两个分类变量的频数表称为列联表。常用等高条形图展示列联表数据的频率特征。 基础--综合--能力--创新 4 ㈢两个事件独立的含义:如果事件A与B的发生彼此互不影响,或者影响可以忽略不计,就可以认为事件A与B是相互独立的。把相互独立事件A与B同时发生,记做“AB”,那么其概率为:

)().()(BPAPABP。

还有其它的公式:)().()(BPAPBAP;)().()(BPAPBAP; )().()(BPAPABP

㈣独立性检验: 利用随机变量K2来判断“两个分类变量有关系”的方法称为独立性检验。 反证法原理与独立性检验原理的比较 反证法原理 在假设H0下,如果推出一个矛盾,就证明了H0不成立 独立性检验原理 在假设H0下,如果出现一个与H0相矛盾的小概率事件,就推断H0不成立,且该推断犯错误的概率不超过这个小概率

一般地,假设有两个分类变量X和Y,它们取值分别为{x1,x2}和{y1,y2},其样本频数列联表(称为2×2列联表)为: (事件B)Y的取值y1 (事件B)Y的取值y2 总计

(事件A)X的取值x1 a b a+b

(事件A)X的取值x2 c d c+d 总计 a+c b+d a+b+c+d

假设H0: X与Y没有关系,即X与Y独立。 则有P(XY)=P(X)P(Y) ; 根据频率近似于概率,故有

化简得 因此,越小,两者关系越弱;越大,两者关系越强; 基于以上分析,构造随机变量

,其中为样本容量 K2的值越小则关系越小,K2的值越大则关系越大。(实际应用中通常要求a,b,c,d都不小于5) 计算K2的观测值k并与K2作比较。 统计学研究发现,在H0成立的情况下,

即在H0成立的情况下,K2的观测值超过6.635的概率非常小,近似为0.01,是一个小概率事件。 若观测值k大于6.635,则有理由判定H0不成立,即“X与Y有关系”。但这种判断会犯错误,犯错误的概率不会超过0.01 . *(这里概率计算的前提是H0成立,即H0:两个分类变量没有关系) 若要推断的论述为H1:“X与Y有关系”。可以通过频率直观地判断两个条件概率P(Y=y1|X=x1)和P(Y=y1|X=x2)是否相等。如果判断它们相等,就意味着X和Y没有关系;否则就认为它们有关系。由上表可知,在X=x1的情基础--综合--能力--创新 5 况下,Y=y1的频率为 ;在X=x2的情况下,Y=y1的频率为 。因此,如果通过直接计算或等高条形图发现和相差很大,就判断两个分类变量之间有关系。 利用独立性检验原理可以进一步给出推断“两个分类变量有关系”犯错误的概率。具体做法是: ⑴根据实际问题的需要确定容许推断“两个分类变量有关系”犯错误概率的上界α ,然后查下表确定临界值0k 0.50 0.40 0.25 0.15 0.10 0.05 0.025 0.010 0.005 0.001 k0 0.455 0.708 1.323 2.072 2.706 3.841 5.024 6.635 7.879 10.828 ⑵利用公式计算随机变量K2的观测值k. ⑶如果K2的观测值k大于判断规则的临界值k0,即k≥k0,就推断“X与Y有关系”,这种推断犯错误的概率不超过α ;否则,就认为在犯错误的概率不超过α的前提下不能推断“X与Y有关系”,或者在样本数据中没有发现足够证据支持结论“X与Y有关系”。 按照上述规则,把“两个分类变量之间没有关系”错误地判断为“两个分类变量之间有关系”的概率不超过. 定义:

则 若“X和Y没有关系”则有 有可推出

即可取 于是有以下判断规则: 当W的观测值时,就判断“X和Y有关系” ;否则,判断“X和Y没有关系”。这里为正实数,且满足在“X和Y没有关系”的前提下

㈤22列联表: 假设有两个分类变量X和Y,它们的值域分另为{x1, x2}和{y1, y2},其样本频数22列联表为: y1 y2 总计 x1 a b a+b x2 c d c+d 总计 a+c b+d a+b+c+d 若要推断的论述为H1:“X与Y有关系”,可以利用独立性检验来考察两个变量是否有关系,并且能较精确地给出这种判断的可靠程度.

具体的做法是,由表中的数据算出随机变量2K的值22()()()()()nadbcKabcdacbd,其中nabcd为样本容量,K2的值越大,说明“X与Y有关系”成立的可能性越大.