语言测试中的真实性概念
- 格式:doc
- 大小:17.00 KB
- 文档页数:3
第54卷第2期江西师范大学学报(哲学社会科学版)Vol.54No.22021年3月Journal of Jiangxi Normal University(Philosophy and Social Sciences Edition)Mar.2021普通话水平测试的真实性研究黄乙玲1,2,姚喜双2(1.江西师范大学国际教育学院,江西南昌330022;2.中国社会科学院研究生院,北京102488)摘要:真实性是现代语言测试研究中的核心问题之一。
真实性保证了测试结果能够有效地表征应试者在目标语域中的语言运用能力,是衡量测试质量的重要依据。
目前,学界对真实性的概念界定及其在测试各环节中的应用实践尚有争议。
开展普通话水平测试中的真实性研究有助于提升测试对汉语普通话学习的反拨效用,为未来新兴技术在测试领域的开发、利用及测试向不同界域发展提供了参考依据。
首先,通过探索学界三种主流测试真实观在汉语普通话测试领域的适用性,对普通话测试真实性进行了概念界定,提出真实性与信度、效度等因素共同构成评价普通话测试质量的依据;其次,从普通话水平测试活动的基本要素出发,分析测试各环节的真实性因素,探索如何提升普通话水平测试的真实性程度以提高测试质量;最后,探讨了真实性研究在汉语普通话测试中的发展前景。
关键词:语言测试;普通话;真实性中图分类号:H102文献标志码:A文章编号:1000-579(2021)02-0134-06A Study on the Authenticity of Putonghua Proficiency Test. All Rights Reserved.HUANG Yiling1,2,YAO Xishuang2(1.School of International Studies,Jiangxi Normal University,Nanchang,Jiangxi330022;2.Graduate School of Chinese Academy of Social Sciences,Beijing102488,China)Abstract:Authenticity is one of the core issues in modern language testing research.Authenticity en-sures that the test results can effectively represent the examinee’s language performance in the targetdomain,which is an important basis for measuring the test quality.At present,the definition of au-thenticity and its application in testing are still controversial in academic circles.The research on theauthenticity of Putonghua proficiency test is helpful to improve the backwash effect of the test on thelearning of Putonghua,and provide a reference for the development and utilization of new technolo-gies in the field of testing and the development of testing in different fields in the future.Firstly,thispaper explores the applicability of three mainstream testing concepts in the field of Putonghua tes-ting,defines the concept of authenticity of Putonghua testing,and proposes that authenticity,reliabili-ty,validity and other factors constitute the basis for evaluating the quality of Putonghua testing;Sec-ondly,starting from the basic elements of the Putonghua proficiency test,this paper analyzes the au-thenticity factors of each link of the test,and explores how to improve the authenticity of the Putong-收稿日期:2020-10-22作者简介:黄乙玲(1979-),女,江西上饶人,江西师范大学副教授,中国社会科学院研究生院博士研究生。
英语测试中的效度、信度和真实性作者:陈莉燕王军来源:《课程教育研究·上》2014年第01期【摘要】英语考试种类繁多,有国家四六级,AB级,还有面向社会的PETS考试出国人员的GRE\TOFEL等。
本文从各种英语考试命题的角度出发,分析一份试卷的效度、信度和真实性,对一线的教学工作者而言知道如何确定试卷的质量,在以后的教学中会有很重要的应用价值。
【关键词】英语测试效度信度真实性【中图分类号】G718.5 【文献标识码】A 【文章编号】2095-3089(2014)01-0096-01如何评判一份试卷的质量?如何测试各种语言技能和如何设计各种测试题目?我们知道一套试卷最终设计好了之后,我们更应该知道它的质量如何?也就是它是否符合语言测试的要求?所以,需要对试卷质量进行评估,评估的主要标准是什么?一般就是它的效度、信度和真实性。
下面分别讨论之。
1.效度效度,又称有效性。
它是指一套测试卷所考的是否就是设计人所要考的内容,或者说,在多大程度上考了想要考的。
所以,效度的高低是衡量一套语言测试卷最重要的指标,它是语言测试的出发点,是基点,因为一项效度很低的语言测试是没有实际意义的。
例如,测试听力的考试中出现了写作,这种测试效度是很低的。
例如,Is photography an art or science?这种题目效度很低,因它似乎是对有摄影知识的学生才起作用,对摄影一无所知的学生而言根本测不出他们的写作能力。
所以,这个题目对后者而言效度很低,因为我们要测的是他们的写作能力而不是摄影知识能力。
需要指出的是,语言测试的效度是一个相对概念。
例如,把剑桥商务英语证书考试来测试非英语专业的学生英语水平效度就很低。
2.信度信度是指考试结果的可靠性和稳定性,它通常以两次考试结果相关系数来表示,系数越高,信度也就越高。
影响信度的因素很多,主要有外部环境和个人因素,同时试卷的量是否足够大,区分度是否高,难易度是否适中,评分是否客观等因素也影响着信度。
从语言测试的真实性角度分析CET-4听力摘要:听力测试是英语考试或其他语言考试内容的一部分,一般考察考生对该语言的听话能力,因而其真实性直接影响语言测试的真实性。
听力测试的真实性主要体现为测试材料的真实性和测试任务的真实性。
本文以语言测试的真实性为理论依托,试论大学英语四级测试(CET-4)中听力题型的真实性,指出CET4听力题型应适度增加主观题,使受试者完成非言语性的交际任务。
关键词:听力测试;真实性:语言测试一、引言大学英语四级测试是根据理工科本科和文理科本科用的两个《大学英语教学大纲》,由教育部(原国家教育委员会)高等教育司组织的全国统一的单科性标准化教学考试。
目的是测量考生是否达到了《大学英语教学大纲》中规定的大学英语四级和六级的教学要求,促进和检查《大学英语教学大纲》的贯彻执行,从而提高大学英语教学的水平。
而其中听力部分是及其重要且常常是学生们普遍感觉比较棘手的一部分。
国内语言测试界在不断的发展,研究范围已经涉及到了各个测试方向,包括近来才引起学者注意的测试的真实性这一概念,但多数研究只是从宏观的命题、效度和反拨作用等角度加以探索,很少有人从微观的测试技能本身,如从听力测试的角度来进行探讨。
所以,本文以语言测试的真实性为理论依托,尝试研究以CET4为对象的英语听力测试的真实性问题。
二、语言测试的真实性概念20世纪70年代,随着交际教学法的出现,Wid-dowson(1978)提出了语言教学的真实性问题。
80和90年代,随着语言交际测试法的出现,Morrow(1991)和Bachman(1990)等人提出了语言测试的真实性问题。
此后真实性问题成为语言测试的一个热门话题。
语言教学和测试界的学人为此进行了广泛探讨(Widdowson 1978,1990,1996;Breen 1985;Bachman1990;Lewkowicz 1998,2000)。
Morrow(1991)认为“真实性问题是语言测试的一个重要方面”。
大学英语四、六级口语考试真实性分析周培树【摘要】语言测试的真实性问题是语言测试一个重要的概念,大学英语四、六级口语(CET-SET)在社会越来越引起大家的关注,最近几年来一些学者和研究人员对语言测试的真实性问题有所研究,却鲜有涉及CET-SET的真实性问题.本文将从语言测试真实性的概念入手,全面分析CET-SET各环节中真实性的体现.认为有必要提高语言测试真实性的理论研究水平,以期更好指导CET-SET的实践,保证其信度和效度.【期刊名称】《宁波教育学院学报》【年(卷),期】2013(000)002【总页数】5页(P62-66)【关键词】语言测试;真实性;大学英语四、六级口语考试【作者】周培树【作者单位】内江师范学院外国语学院,四川内江641000【正文语种】中文【中图分类】H310.42我们知道,语言测试(这里主要指外语测试)是随着外语教学的发展而出现的。
有了外语教学,便有了语言测试[1]19。
随着20世纪70年代交际语言教学的产生,Bachman于20世纪80-90年代提出了“交际语言测试模式(an interactional approach to la nguage testing)”,其焦点为真实性,因此,真实性成为交际语言测试一大标志,进而成为语言测试的“核心”[2]330。
关于语言测试真实性的问题,国内外测试界的专家学者都进行过激烈的探讨。
Bachman和Palmer[3]17认为,实用性(usefulness)作为指导测试的基本原则之一表现在六个方面:信度、理念效度、真实性、交互性、后效作用和实用性,其中真实性是语言测试的一个重要特征。
Morrow(1991)认为真实性问题是语言测试一个重要的问题,Wood(1993)认为语言测试的两个主要问题——信度和效度,可以归结为真实与不真实的问题。
国内一些专家也提到了语言测试的真实性问题,如邹申(2001)探讨过口试的真实性,孔文,李清华(2003)对语言测试真实性进行过多维度研究,黄大勇(2004)介绍过语言测试中的真实性概念,周胜(2006)对语言测试各环节真实性做过概述,近几年,汪顺玉,彭康洲(2009),李新博(2011),徐启龙(2012)等,也都探讨过语言测试真实性问题。
真实性检验证实所建立的模型的合理性和有效性,有好多方法。
而Vensim所提供的真实性检验(Reality Check)是一种非常有效的方法和工具。
它也是Vensim的一个主要特征。
真实性检验的概念模型是对于现实存在的系统的简化和抽象。
我们可以由建立的模型方便的得到系统的行为模式。
但如何确定这些行为模式正确性?常用的一种方法是对照现实的情况,仔细分析运行得到的各个变量时间序列数据及其相互关系。
在系统复杂、变量多情况下,这是很困难的。
一种简单有效的方法是首先确定模型的正确性。
如果模型不违反基本的常识和规则,模型本身的合理性得到了检验,则系统的行为模式的真实性就有了保证。
真实性检验由这一思想出发,提供了一种简便和有效的方法和工具。
根据要研究的系统的基本情况,我们一般可以提出模型应该遵守的一些基本假定。
这些基本假定是保证模型正确的必要条件,构成了对于模型正确性的一系列约束。
真实性检验就是在模型建立后,通过标准的约束描述语言,具体地描述这些约束,并通过运行模型,自动的检验系统的行为模式是否违反这些约束。
若违反,说明模型尚不完善,则要调整模型的结构和参数,直到符合这些约束条件。
真实性检验的描述部分完全独立于模型本身,不会改变模型结构和行为模式。
模型真实性检验的定义1.变量的命名检验语句是对于假设的描述,是由实际系统出发对于模型的行为模式的断言。
它一般包含的变量是“判断句”。
有别于一般的变量用名词命名,它一般用表示判断的短语命名。
例如:no worker no production, rain means flooding。
2. 输入测试变量(Test Input)用来代替一个等式。
它只能用作约束的前提条件,可以使约束变得简单易读。
在约束表达式中,在其条件部分出现以一个逻辑变量形式出现。
其定义形式为:name :TEST INPUT: variable = expression其中,name表示变量名,:TEST INPUT: 是变量类型标识,而后面等式是定义的对象。
谈语言测试的真实性及其影响[摘要]真实性已经成为语言测试中的关键问题。
真实的语言测试能够检测出考生的语言水平和语言运用能力。
本文从真实性的概念、表现形式和作用等几个方面谈了作者对真实性的认识,指出语言测试的真实性是一个复杂的问题,对语言测试的有用性发挥着至关重要的作用,应该引起测试设计者的极大重视。
[关键词]测试语言测试真实性语言测试是伴随着语言教学出现的,发展到今天已经成为一门多科性的综合性学科,它以语言学习为内容,以心理测量为手段,对受试者所应达到的各项指标进行科学地检测。
从20世纪70年代开始,语言测试的真实性开始引起语言教学和测试界专家的重视。
巴克曼和帕尔默指出:评价一项测试质量的主要依据是测试是否具有实用性,具体表现在六个方面:信度、效度、真实性、交互性、影响和实用性,其中真实性是语言测试的一个重要特征。
语言测试的真实性是测试界一直关注的问题,斯波尔斯基(spolsky)早就指出:“语言测试的真实性标准给测试领域提出了语用和伦理的问题。
测试材料缺乏真实性对我们根据测试成绩所得出的结论也提出了疑问。
”一、语言测试的真实性的概念对于语言测试的真实性(authenticity)的理解,不少学者提出了自己的见解。
有人认为真实性即直接性(directness),即不通过语言能力的中介表现就能测试考生的语言能力。
然而,语言能力是不能直接考查出来的,因为大脑神经活动的过程无法用试卷来测量。
因此,所有语言测试都是间接测试。
一些人将真实性定义为与现实生活的相似程度,还有人把真实性和测试的表面效度(face validity)等同起来。
由此可见,测试的真实性是一个复杂的、具有主观性和相对性的概念。
bachman曾指出:语言测试的真实性指目标语言使用任务特征(target language use task)与测试任务特征(test task)的一致程度。
目标语言使用任务,指通过测试所要预测的被试者在将来工作中为达到一定目的在特定场合用所学语言知识进行一系列活动,测试任务能够考察、预测、判断被试者在将来工作中目标语使用能力的最佳方式。
2000年1月第32卷 第1期外语教学与研究(外国语文双月刊)Foreign Language Teaching and Research(bimonthly)Jan.2000Vol.32No.1语言测试:理论、实践与发展北京外国语大学 韩宝成 提要:本文综合分析语言测试的两个基本问题:语言能力和如何对其进行测量,并讨论语言测试研究与发展趋势,如重视行为测试、注意研究被试特征对测试行为的影响、在语言测试中采用新的研究方法及结合计算机技术开发新一代测试及评估系统等。
关键词:语言能力、行为测试、被试特征、e2rater [中图分类号]H310.4[文献标识码]A[文章编号]1000-0429(2000)01-0047-611引言语言测试的主要目的是对被试的语言能力做出准确、公正的测量。
那么,什么是语言能力?如何对语言能力进行测量?这是语言测试研究要解决的两个基本问题。
本文综合分析关于这两个问题的研究情况,并结合计算机及网络技术等方面的进展,分析未来语言测试的发展。
21什么是语言能力?这是任何语言测试工作者首先面对并必须回答的问题。
对于什么是语言能力,历史上不同时期人们的观点和看法不尽一致。
在科学前语言测试时期,语言学虽然有了一定的发展,但尚未形成指导语言教学的系统理论,外语教学基本上是一种凭经验或遵循传统的教学。
语言教师把语言当作一门知识在教,包括语音知识、语法知识和词汇知识。
语言测试也就考察被试对这三方面知识的掌握情况。
20世纪40年代,结构主义语言学兴起。
语言学家提出“语言是一套形式结构,一套符号系统”的论断。
与此同时,行为主义心理学大行其道。
受结构主义语言学和行为主义心理学的影响,人们认为学习语言就是要获得操作这套符号系统的技能,即训练对刺激做出正确反应的一套语言习惯。
在这个时期,心理测量学理论对语言测试也产生了很大的影响。
心理测量学坚持语言能力可分说,认为语言可以分解为语言技能和语言成分,人们运用这些语言技能和语言成分的能力就是一个人的语言能力。
语言测试中的真实性概念
作者:吴月
来源:《科教导刊》2014年第04期
摘要语言测试的“真实性”一直以来是一个颇具争议的概念。
本文将从命题的真实性以及评价的真实性两个方面对语言测试的真实性概念进行解析。
本文提倡更多的测试研究者以及广大的外语教师能够从不同角度深入研究真实性概念,构建更全面系统的理论框架,进行更多的实证性研究。
关键词真实性语言测试语言学习
中图分类号:H319.3 文献标识码:A
The Concept of Authenticity in Language Testing
WU Yue
(Zhejiang Normal University, Jinhua, Zhejiang 321004)
Abstract Authenticity in language testing has always been a controversial concept. This paper will analyze it from two aspects, namely the authenticity of proposition and evaluation. The paper advocates more testing researchers and foreign language teachers can dig into the concept of authenticity from different perspectives, construct overall and systematic theoretical framework and conduct more empirical studies.
Key words authenticity; language testing; language study
0 引言
真实性问题已成为语言测试领域内的一个热门话题。
Carroll(1980:11)曾强调,“在讨论语言测试时,真实性问题永远是一个重要方面。
” “用Conrad的话来说,真实性是语言测试的核心问题”(Bachman 1990: 330)。
1984年,在国际语言测试大会上,来自世界各国的测试专家就测试的真实性问题进行了专门的讨论。
会后,1985年,语言测试方面的权威学术期刊《语言测试》(Language Testing)出了专号以探讨真实性问题。
近三十几年来,在语言测试领域,真实性得到越来越多的语言学家以及其他语言测试研究者的青睐。
Bachman(1990,1991)、Bachman and Palmer(1996)、Waters(2009)、Badger& Malcolm(2010)、徐强(1992)、李清华(2001)、刘珊(2012)等就真实性本质以及其存在的问题进行了讨论。
在此基础上,本文将从命题的真实性以及评价的真实性两个方面对测试真实性做进一步探讨。
1 命题的真实性
命题在语言测试的过程中占据重要的位置。
一份试卷的真实性与命题密切相关。
本部分将从命题角度出发,研究如何从测试材料和测试任务两方面把握真实性。
1.1 测试材料的真实性
语言测试要使用一定的语言材料或文本。
而在材料的真实性问题上主要存在两种观点。
一种观点认为真实的材料是直接来源于现实生活的材料,而不是专门为语言教学或测试编写、录制的材料。
如Carroll (1980:12)指出,“考试的语言应该是日常的语言,不被简化、编辑或改动,而以其预料的不规则呈现给考生,语言交换的背景是真实的”。
但这种观点存在不少的问题。
首先,直接来源于现实生活的材料到底是来源于目标语使用者的现实生活还是外语学习者的现实生活。
其次,直接来源于现实生活的材料不能够全部满足教学与测试的需求。
有些材料过于简单,有些材料过于复杂,有些材料根本就不符合课程标准的要求。
这些测试材料无法测出受试者真正的语言水平。
另一种观点则区分了材料的真实性与真实的材料这两个不同的概念。
Widdowson (1978:80)提出,“真实材料是就材料本身而言,而真实性指的是材料和读者之间的关系特性,与读者的恰当反应有关。
”但是,这样的观点也存在诸多不足。
由于语言能力以及所受到的教育背景的不同,每位受试者对测试材料的感受有所不同。
即使是同一份材料,受试者在不同的时间、场合下反应也不尽相同。
因而很难对这一概念做出清晰的界定。
1.2 测试任务的真实性
这里的“任务”指的是要求被测试者完成的事情。
测试任务的真实性是指测试任务与现实中语言交际任务的相似程度。
Bachman &Palmer(1996)把测试的真实性定义为语言测试任务的特征与目标语使用任务的特征的对应程度。
因而,为了确保测试的真实性,语言测试中的任务就要尽量与现实生活中的交际任务保持一致。
但这其中也有不少问题。
首先,现实生活中的交际任务多种多样,很难确定测试标准。
其次,目标语使用任务的特征纷繁多样,到底哪些特征是最重要的。
第三,对命题者来说是真实的,对考生来说未必真实。
2 评价的真实性
真实性评价是检验学生学习成效的一种评价方式。
它要求学生运用所学的知识和技能去完成真实世界或模拟真实世界中一件很有意义的任务,从而考察学生知识与技能的掌握程度,以及实践、问题解决、交流合作和批判性思考等多种复杂能力的发展状况。
真实性评价主要由真实性任务和量规这两个部分组成。
量规是一种评分工具。
它分为两个部分,即评价项目和评价等级。
要实现评价的真实性,必须达到以下几个要求。
首先,任务必须来源于真实世界或模拟真实世界。
其次,任务难度适中,适宜不同阶段的学生。
第三,任务具备一定的挑战性,让学生有兴趣去完成。
最后,制定适当的量规,确定合适的评价项目以及评价等级。
3 结语
关于语言测试中的真实性,仍有诸多问题悬而未决。
有关真实性的研究大多停留在理论探讨层面,缺乏实践性的证据支撑。
这就需要测试研究者和广大外语教师共同努力,从不同的角度深入研究真实性概念,构建更全面系统的理论框架,进行更多的实证性研究,进一步阐明语言测试真实性的真正内涵。
参考文献
[1] Bachman,L.F.1990.Fundamental Considerations in Language Testing. Oxford: Oxford University Press.
[2] Bachman,L.& Palmer,A. 1996. Language Testing in Practice. Oxford: Oxford University Press.
[3] Badger Richard & Malcolm Macdonald.2010. Making it Real: Authenticity,Process and Pedagogy. Applied Linguistics: 31(4):578-582.
[4] Carroll,J.B.1980. Testing Communicative Performance. London: Permagon Press.
[5] Waters Alan. 2009. Ideology in Applied Linguistics for Language Teaching. Applied Linguistics: 30(1):138-143.
[6] Widdowson,H.G.1978.Teaching Language as Communication.Oxford:Oxford University Press.
[7] 李清华.论交际测试中的“真实性”[J].外语界,2001(6):68-71;78.
[8] 刘珊.英语口语测试真实性的理论探讨[J].语文学刊·外语教育教学,2012(12):149-150.
[9] 徐强.英语测试的理论与测试实践[M].合肥:安徽教育出版社,1992.。