英语听力测试中受试行为的制约因素研究：测试方法特征和中国英语学习者个人特征的相互作用

论文摘要

本文重点考察三个方面的因素对受试行为的影响:测试方法特征、考生个人特征以及两者的相互作用,旨在为提高听力测试的效度和改进听力测试提供实证性的研究结果。语言测试的目的是对考生的语言能力做出准确、公正的测量,Bachman(1990)指出考生的语言能力、考生个人特征、测试方法及其他因素均会对受试行为产生影响。一项测试的结果并非考生的潜在能力的全面而真实的体现,其中可能会有测试方法因素和考生个人特征因素的影响。考生个人特征包括受试的文化背景、背景知识、认知能力、性别和年龄等。测试方法是用来引发受试在测试中的表现、以便从中推断受试的语言能力的方法。本文的出发点是,对于语言测试的研究中,不仅要明确语言能力究竟是什么,而且要进一步探讨测试方法和个人因素是如何与语言能力相互作用、最终共同导致应试者在考试中的表现的。听力理解的过程是一个复杂的心理认知过程,是说话者、听力材料及听话者等多种因素相互影响的结果,包括了一系列的认知活动。听者需要利用各种语言和非语言的知识积极主动地对声学信息进行过滤、重组、编码和贮存,他要对存在于连续语流中的语音信息进行即时处理,而他的短时记忆容量有限。这些特点决定了听力理解需要较高程度的自动处理,听者必须积极地监控整个听力理解过程,并且在必要时及时采取补救措施以解决出现的问题。因此在英语为外语的听力理解测试中,考生的心理因素(如焦虑、态度和动机)和策略使用因素等都有可能对受试行为产生影响。本文的研究对象是187名中国非英语专业本科生,包括三个阶段的研究。第一阶段的研究考察了测试方法因素对听力理解的影响,主要运用的研究方法是文献、资料查阅以及相关分析、回归分析等定量的数据分析。实验的材料包括48篇听力短文和159个多项选择题,收集到两组重要数据:听力材料特征的分析结果和试题项目特征的分析结果。这两项研究清楚地描绘出可能影响试题项目难度的因素。第二阶段的研究调查了学生的考试态度、考试动机、考试焦虑和考试策略这四项考生个人特征因素对英语为外语的听力理解测试中的受试行为可能产生的影响。主要运用的研究方法是问卷调查和测试数据分析。结果表明,对受试行为影响最大的考生个人特征因素是考试态度,影响最小的是考试动机。在代表个人特征的变量中有三个对学生的考试成绩有显著的预测能力:考试态度、考试焦虑和考试策略。本研究初步论证了考生个人特征因素对受试行为的影响,也证明了在听力理解测试中,除了学生的听力能力外,他们的社会心理因素和策略运用因素都可能对受试行为产生影响。研究结果揭示了测试方法特征和考试个人特征的交互作用。第三阶段的研究采用了即时追述法的研究手段,对10名学生即时追述自己听解答题过程的录音和访谈材料进行了定性的分析,分析结果揭示了考生在答题过程中是通过什么途径、以什么方式、经过了什么步骤获取答案的。分析结果进一步证实了定量分析的结果,在听力理解测试中,除了学生的听力能力外,测试方法特征因素与考生个人特征因素相互作用影响受试行为。在本研究条件下,我们获得如下结论:在英语听力理解测试中,测试方法特征、考生个人特征以及两者的交互作用这三个方面的因素都可能影响受试行为。研究的结果揭示了中国英语学习者英语听力答题过程的一些特点,同时研究的结果为英语听力理解测试的效度研究提供了实证性的数据,对于英语听力教学和听力测试的研究具有积极的意义。

论文目录

• Acknowledgements
• Abstract
• 摘要
• List of figures
• List of tables
• List of abbreviations
• 1 Introduction
• 1.1 Context of the study
• 1.2 Purpose of the study
• 1.3 Research questions
• 1.4 Definition of key term
• 1.5 Significance of the study
• 1.6 Structure of the thesis
• 2 Assessing listening comprehension
• 2.1 Nature of listening comprehension
• 2.1.1 Cognitive processes of listening comprehension
• 2.1.2 Features of listening comprehension
• 2.1.3 Knowledge used in listening comprehension
• 2.2 Construct of listening
• 2.2.1 Construct definition
• 2.2.2 Listening comprehension ability
• 2.3 Factors that affect performance on listening tests
• 2.3.1 Theoretical models
• 2.3.2 Empirical studies
• 3 Research on test task characteristics
• 3.1 Theoretical framework of test task characteristics
• 3.2 Identifying characteristics of listening tasks
• 3.2.1 Text materials
• 3.2.2 Expected response
• 3.2.3 Item
• 3.3 Factors affecting difficulty of listening tasks
• 3.3.1 Text features that affect difficulty
• 3.3.2 Task features that affect difficulty
• 3.3.3 Empirical studies
• 4 Research on test-taker characteristics
• 4.1 Characteristics of individuals in language tests
• 4.2 Describing test-taker characteristics
• 4.3 Socio-psychological factors of test-takers
• 4.3.1 Attitudes
• 4.3.2 Test-taking motivation
• 4.3.3 Test anxiety
• 4.4 Strategic factors of test-takers
• 4.4.1 Concept of strategic factors
• 4.4.2 Empirical studies on strategy use
• 5 Design of the current research
• 5.1 A framework of factors affecting performance on EFL listening tests
• 5.1.1 Components of test task related variables
• 5.1.2 Components of test-taker related variables
• 5.2 Research design
• 5.3 Test tasks used in the research
• 5.3.1 CET listening subtest
• 5.3.2 CET listening tasks
• 6 A documentary study on CET -4 listening passages
• 6.1 Purpose of the study
• 6.2 Listening input materials and items
• 6.3 Variables assessing task characteristics
• 6.4 Procedures
• 6.5 Results and discussion on passage analyses
• 6.5.1 Descriptive results of the text materials
• 6.5.2 Analysis of variance across text groups
• 6.5.3 Task input features of CET-4 listening passages
• 6.6 Results and discussion of item analyses
• 6.6.1 Factor analysis of the item-related variables
• 6.6.2 Correlation analysis
• 6.6.3 Regression analysis
• 6.7 Conclusions
• 7 An empirical study on EFL test-takers
• 7.1 Purpose of the study
• 7.2 Participants
• 7.3 Instruments
• 7.3.1 The English proficiency test
• 7.3.2 Listening comprehension tests
• 7.3.3 The test-taker questionnaire
• 7.4 Variables used in the study
• 7.5 Procedures
• 7.5.1 Pilot study
• 7.5.2 Administration of the tests
• 7.5.3 Statistical analysis
• 7.6 Results and discussion
• 7.6.1 Overall results
• 7.6.2 Effects of task characteristics on test performance .
• 7.6.3 Test-taker characteristics and language proficiency
• 7.6.4 Effects of test-taker characteristics on test performance
• 7.6.5 Interactions of test-taker characteristics and item types
• 7.6.6 Investigation of gender differences
• 7.7 Conclusions
• 8 A retrospective study on test performances
• 8.1 Purpose of the study
• 8.2 Theoretical assumptions
• 8.2.1 Test-taking process of listening comprehension
• 8.2.2 Verbal protocol analysis
• 8.2.3 A strategy framework
• 8.3 Data collection
• 8.3.1 Sample
• 8.3.2 Listening tasks
• 8.3.3 Data elicitation
• 8.3.4 Data transcription
• 8.4 Data analysis
• 8.4.1 Effects of test-takers’socio-psychological factors
• 8.4.2 Effects of test-takers’strategic factors
• 8.4.3 Performance on multiple-choice items
• 8.4.4 Performance on the dictation task
• 8.5 Conclusions
• 9 Conclusions
• 9.1 Summary of major findings
• 9.2 Limitations of the research
• 9.3 Implications
• 9.4 Suggestions for future research
• References
• Appendices