项目反应理论简介
- 格式:ppt
- 大小:465.00 KB
- 文档页数:57
IRT理论(Item Response Theory)IRT理论概述IRT理论即项目反应理论(Item Response Theory, IRT),又称题目反应理论、潜在特质理论(Item Response Theory)是一系列心理统计学模型的总称。
IRT是用来分析考试成绩或者问卷调查数据的数学模型。
这些模型的目标是来确定的潜在心理特征(latent trait)是否可以通过测试题被反应出来,以及测试题和被测试者之间的互动关系。
目前广泛应用在心理和教育测量领域。
项目反应理论的意义在于可以指导项目筛选和测验编制。
项目反应理论假设被试有一种“潜在特质”,潜在特质是在观察分析测验反应基础上提出的一种统计构想,在测验中,潜在特质一般是指潜在的能力,并经常用测验总分作为这种潜力的估算。
项目反应理论认为被试在测验项目的反应和成绩与他们的潜在特质有特殊的关系。
通过项目反应理论建立的项目参数具有恒久性的特点,意味着不同测量量表的分数可以统一。
项目反应理论通过项目反应曲线综合各种项目分析的资料,使我们综合直观地看出项目难度、鉴别度等项目分析的特征,从而起到指导项目筛选和编制测验比较分数等作用。
项目反应理论的特点(1)独立性。
被试特质水平不依赖于被试样本的代表性;被试水平参数不依赖于测验项目组;项目特征参数不依赖于所测被试组的参数不变测验项目组。
(2)项目理论中被试水平和项目难度可以直接比较;(3)正视了测量误差和项目性能是否与被试水平相关这一事实;(4)提供了计算机化自适应测验这一策略;(5) 从计量学角度提出了自己的新观点与新技术。
历史发展IRT理论发端于20世纪50年代,它同时被丹麦统计学家Georg Rasch和美国心理统计学家Frederic M. Lord在各自的国家发展起来。
尽管采取的研究方法不同,但是他们的结果却非常相似。
F. Lord在1951年从普林斯顿大学毕业时的博士论文《A Theory of Test Scores》被认为是IRT 理论的开端之作。
项目反应理论简介摘要:项目反应理论(IRT)是近三十年发展起来的一种比较先进的心理与教育测验理论,受到国内外许多学者和专家的关注。
与经典测验理论相比,项目反应理论在较强的前提假设下,有更多的优越性。
关键词:经典测验理论;项目反应理论;项目特征曲线;罗氏模型一、引言目前,考试系统题库的建立主要基于两种指导理论:经典测验理论(Classical Test Theory, CTT)和项目反应理论(Item Response Theory, IRT)。
二者都有一套完整的试题分析指标体系和评价标准。
但经过长期实践,经典测验理论显示出某些难以克服的缺点,如由不同测试项组成的测验其结果无法比较,数据没有等距性,测量结果容易受到样本的影响,以及多个变量不易同时处理等。
针对这些,现代测验理论应运而生。
在国外已广泛应用于教育测验领域,如GRE,GMAT,TOEFL等测验,近年来也扩展应用到其他学科领域的测验评估。
Baker (2001)认为,在经典测验理论指导下,测试学家关心的是被试的测试得分,即每个正确测试项的分值总和。
而项目反应理论的关注重点则是被试是否答对每个测试项,而不是被试的测试总分。
项目反应理论和经典测验理论在数学模式、基本假设和测验可靠程度的估计指标等方面都存在着明显的差别。
与经典测验理论相比,项目反应理论在较强的前提假设下,有更多的优越性。
二、项目反应理论项目反应理论,也称潜在特质理论、潜在特质模型、强真值理论,是一种现代心理测量理论,是一系列心理统计学模型的总称,是针对经典测量理论的局限性提出来的。
项目反应理论是用来分析考试成绩或者问卷调查数据的数学模型,这些模型的目标是来确定潜在心理特征(latent trait)是否可以通过测试题被反应出来,以及测试题和被试之间的互动关系。
项目反应理论假设被试对项目的反应能体现他的潜在特质(Baker, 2001)。
根据被试回答测试项的情况,通过对项目特征函数的运算,来推测被试的能力。
项目反应理论的形成与基本理论假设项目反应理论(Item Response Theory, IRT)是针对测试和评价领域中的一种方法和理论,旨在解决测量数据分析过程中的一系列问题,如测验题目类型、人群不同表现和不同测量精度等等。
该理论由多位统计学家和心理学家共同发展而来,包括Lord和Novick(1968), Hambleton、Swaminathan和Rogers (1991), Kolen 和Brennan(2014)等人。
项目反应理论早期起源于功效曲线(曲线上(Y-坐标)表示试题难度,X-坐标表示受试水平)。
1927年,美国心理学家Thurstone对于智力测验中的单项选择题目进行了功效曲线的研究。
1933年,Lazarsfeld和Henry对于记忆实验数据的分析中提出了多因素问题的解决方案(在Lazarsfeld和Henry的研究中最初称为Comparative-Quality Scale Technique Method)。
而当广义线性模型(GLM)在20世纪70年代发明出来之后,它便成为了许多现代IRT方法的基础。
IRT理论在假设中有一些基本前提,其包含了三个主要部分:1. 题目模型。
IRT模型的第一个基本假设是关于题目模型的,即问卷或试卷的测量者需要选择一种反映题目表现的模型。
IRT中最著名的四个模型是二维常识模型(2PLM),一维常识模型(1PLM),三维常识模型(3PLM)和一维等角模型(1PLU)等,试卷数据可以使用这些模型进行模型拟合和解释。
2.人群模型。
IRT的第二个基本假设是关于受试者或群体模型的,即每个被试的特定水平对于含有该要素的题目反应是有效的,以及这种特定水平可以准确地衡量被试者的表现水平,和题目的等级和难度水平有一定的相关性。
3.数据模型。
IRT的第三个基本假设是关于数据模型的,即用户可以基于现有数据拟合合适的IRT模型,通过分析测试中正确答案的项分布情况来优化题目的构成,以适应用户的需求。
项目反应理论(irt)在小学数学成就测验中的应用项目反应理论(IRT)作为一种效度理论,源于美国心理学家Augustus Damien和Anne Angoff等人于1960年,在心理学领域中是一种基于潜在变量结构想像的测量模型,它利用因变量和自变量之间的概率关系得到的线性模型,从而研究人的知识水平以及相关测试的描述。
近几十年来,IRT在教师测试评价领域用的非常多,而其在小学数学成就测验中的应用也是相当有趣的研究主题。
首先,需要明确数学成就测验和IRT之间的关系。
传统数学成就测验是传统教育测试评价的一种,主要通过给出多道题来测量孩子的数学水平。
但是传统的测试评价方法有许多不足,如:对于不同水平的学生来说,相对密集的考题结构不够灵活;成绩的白化假定太强;拟合模型的复杂性,等等,这些制约了传统数学成就测验的发展。
这时,IRT的出现为数学成就测验提供了新机会和新思路,可以有效地改进和完善数学成就测验。
其次,要正确应用IRT,需要考虑到IRT时常用于衡量涉及个体差异的测验。
若是应用于数学成就测验中的每一道题型的话,由于每道题型的能力评价更加准确,模型估计的准确性也会提高。
此外,IRT还可以被应用于诸如校本测验和比较测验等,用来衡量年级成就水平及学校之间的差异,从而更好地进行教育评价。
最后,应用IRT改进和完善数学成就测验,还需要考虑实际运用中的一些技术性问题,比如:遗传结构本质属性的建模;非参数模型在数据缺失的情况下的缩放;参数链接的多层模型的应用;判分头等及后置,等等。
如果能够在解决技术性问题的基础上,通过对数学成就测验中imerst得分优势的深入分析,有助于深入理解全面评价孩子数学学习情况和更好地指导教学。
总之,IRT在解决数学成就测验具有重要意义。
它不仅可以改进评价的准确度,而且可以更加准确地评估孩子的数学水平,有效地指导学校和教师的数学教学工作,为促进小学生在数学学习上的学习积极性提供有效的指导。
项目反应理论任何一种理论都不可能是完美无缺的,作为测量初期发展起来的理论更是不可避免地存在着一些缺陷。
项目反应理论(Item Response Theory, IRT)则是在反对和克服传统测量理论的不足之中发展起来的一种现代测量理论。
无论是CTT还是GT,其测验内容的选择、项目参数的获得和常模的制定,都是通过抽取一定的样本(行为样本或被试样本),因此可以说二者都建立在随机抽样理论基础之上。
它们的局限性主要表现在以下几个方面:(1)信度估计的精确性不高测量的重要目标就是降低测量误差,提高测量的精度。
在经典测量理论中,信度被定义为真分数的方差与实得分数(原始分数)的方差之比。
然而,在此定义中,真分数的方差和误差的方差都无法求取。
为了估计信度,CTT又提出了平行测验的概念,并在此基础上推演出了若干个信度估计公式。
但是严格的平行测验是不存在的,等价测验也很难获得的,在此基础上估计的测验信度很难达到比较高的精确程度。
另外,经典测量理论中的信度估计值也是一个笼统值,即假定对不同能力水平的被试来说,测量的误差是相同的。
而事实是,一份测验只有在施测于能力水平与测验难度相当的被试时容易获得比较高的测量精确度。
当测验施测于能力水平高于(或低于)测验难度的被试时就容易产生较大的测量误差。
而且测量误差值会随着被试水平与测验难度距离的增加而变大。
(2)各种测量参数的估计依赖于被试样本经典测量理论构造了一个完整的理论体系,同时设计了一套参数指标来刻划测量各方面的特性。
如信度、效度、项目的难度、区分度等。
但是这些参数的估计对样本的依赖性是很大的。
如项目难度,对于同一题目,若样本的群体水平较低,就有较高的难度估计值。
测验的信度和效度采用相关分析法,同样受到样本的影响。
为避免抽样误差对参数估计的影响,经典测量理论特别强调样本对总体的代表性。
但经典理论所用的是随机抽样,随机抽样总有一定偏差存在。
何况在实际工作中,由于客观条件的限制,还不能做到随机抽样。
项目反应理论随着心理学的发展, 心理测量无论是在理论上, 还是在方法上都逐步地提高.目前,心理测量有三大理论派别:经典测量理论(Classical Test Theory , 简称CTT) ,项目反应理论(Item Response Theory ,简称IRT) 和概化理论(Generalizability Theory , 简称GT).项目反应理论是一种先进的测量理论,它是针对经典测量理论的不足而提出来的, 其理论基础是潜在特质理论。
项目反应理论的基本思路是确定考生的心理特质值和他们对于项目的反应之间的关系, 这种关系的数学形式就是“项目反应模型”。
下面主要对项目反应的理论假设和数学模型做一下简要概述。
一、项目反应理论的基本假设任何一种数学模型都有一定的前提,任何一种测量都有一定的假设,在项目反应理论中也有三条最基本的假设:潜在特质空间的单维性假设、测验项目间的局部独立性假设、项目特征曲线假设.有的学者还增加了“知道—-答对"假设和非速度限制假设。
在此仅说明前面三条最基本的假设.1、潜在特质空间的单维性假设潜在特质空间是指由心理学中的潜在特质组成的抽象空间。
如果考生在测验项目上的反应是有K种潜在特质所决定的,那么这些潜在特征就定义了一个K维潜在空间,考生的各个潜在特质分数综合起来,就决定了该考生在该潜在空间的位置。
如果影响考生测验分数的所有重要的心理特质都被确定了,那么该潜在空间就称为完全潜在空间。
目前比较成熟的大多数项目反应模型都假设完全潜在空间是单维的,即只有一种潜在特质决定了考生对项目的反应,也就是说组成某个测验的所有项目都是测量的同一个心理变量,例如知识、能力、态度或人格。
当然,这一假设往往不可能得到严格的满足,因为总有其他因素会影响到考生在测验上的反应,这些因素包括认知的、人格的和施测时的客观条件,以及考生的动机水平、焦虑程度、反应速度和考试技巧等。
因此在项目反应理论中,只要所预测量的心理特质是影响考生对项目作出反应的主要因素,那么就认为这组测验数据是满足单维假设的.2、测验项目间的局部独立性假设所谓局部独立性假设是指某个考生对于某个项目的正确概率不会受到他对于该测验中其他项目反应的影响,也就是说只有考生的特质水平和项目的特性会影响到考生对该项目的反应.在实际的教育和心理测量问题中, 如果前一个项目的内容为后一个项目的正确反应提供暗示或其它有效的信息,局部独立性的假设就会遭到破坏,例如所谓的链状试题就会出现这种情况.局部独立性是建立在统计的意义上的,用统计学的语言,局部独立性是指对每一个测验者来说, 对整个试题作出某种反应的概率等于对组成试卷的每个项目的反应的概率的乘积.3、项目特征曲线假设项目反应理论的一个关键就是在被试者对项目作出的反应或作出反应的概率与被测试者的潜在特质之间建立某种函数关系。
项目分析及项目反应理论项目分析是项目管理中非常重要的一部分,它通过对项目的各个方面进行深入的研究和分析,为项目实施提供有效的指导和决策依据。
项目反应理论则是研究项目在实施过程中各种外部因素对项目结果的影响,以及项目团队如何应对和适应这些变化的理论框架。
一、项目分析的概念和目的项目分析是指对项目进行全面的、综合性的分析,以评估项目的可行性和可行性,为项目的实施提供决策依据。
项目分析的目的是充分了解项目的背景、目标和需求,明确项目的范围、目标、资源和计划。
通过项目分析,可以有效地减少项目风险,提高项目成功的几率。
项目分析包括对项目的市场和竞争环境进行分析,对项目的技术可行性和经济可行性进行评估,对项目的组织和管理进行规划等。
通过对项目的各个方面进行详细的研究,可以为项目实施提供科学的依据和指导。
二、项目分析的方法和步骤项目分析通常包括项目需求分析、项目范围分析、项目目标分析、项目资源分析等。
1. 项目需求分析项目需求分析是确定项目所需资源和功能的过程。
在项目需求分析阶段,需要明确项目的业务目标、用户需求、功能需求和性能需求,以便能够准确地制定项目计划和资源分配。
2. 项目范围分析项目范围分析是明确项目的边界和范围,确定哪些工作和活动包含在项目中,哪些不包含在项目中的过程。
通过项目范围分析,可以明确项目的具体目标和任务,确保项目团队的工作重点和方向。
3. 项目目标分析项目目标分析是对项目的目标和关键绩效指标进行分析和评估的过程。
在项目目标分析阶段,需要明确项目的终极目标和里程碑目标,制定合理的目标达成计划和时间表。
4. 项目资源分析项目资源分析是对项目所需资源进行评估和分析的过程。
项目资源包括人力资源、财务资源、技术资源等。
通过项目资源分析,可以合理评估项目的资源需求和资源投入,确保项目实施的顺利进行。
三、项目反应理论的原理和应用项目反应理论是指研究项目在实施过程中受到各种外部因素影响并做出相应反应的理论框架。