华夏学院2011年英语期末考试完形填空项目效度研究

论文摘要

完形填空出现于上世纪50年代,是由威尔逊·泰勒发明的用于测试母语文章可读性或难易度的一种测试手段,后来被广泛运用于外语测试中。它是根据格式塔心理学,即补全心理而设计的,并且大量运用了自然语言中的冗余信息。自完形填空被引进中国以来,对完形填空效度进行了大量的实证研究。1998年,上海外国语大学TEM考试中心与英国文化委员会合作的“TEM考试效度研究”发现,完形填空与TEM考试子项目的内容之间有很高的相关性。同年,杨慧中、Weir两位先生对大学英语四、六级考试效度的研究表明,只要短文选的合适,题目设计得好,完形填空题型就能有效地测试出考生综合运用预言的能力。2005年,聂建中、赵秀红等人探讨了高考英语完形填空的考点效度分析问题。然而,纵观完形填空在国内发展的30余年历史,作者发现,就独立学院英语考试完形填空项目效度从分数解释的角度出发,并探讨其反驳效应,从而反馈辅助教学的研究相对而言甚少。正是基于以上考虑,本研究根据Weir C J提出的效度理论框架,对湖北省武汉理工大学华夏学院2011年期末考试英语完形填空项目效度进行了初步探讨。为了验证这次考试英语完形填空项目的效度,本研究主要采用观察评价和数据统计的方法,从四个方面提供论证依据。首先是内容效度。通过对照考试大纲对完形填空测试内容的规定,分析华夏学院期末考试英语完形填空项目试题,验证内容的关联性和内容的覆盖面。其次是环境效度。观察,评价其环境效度,包括完形填空项目的设置、要求以及考试实施环境。第三是评分效度。根据信度系数值、评分员信度以及项目统计属性(难易度、区分度分析)来验证其评分效度。最后考查后果效度,即考试对考生、教师的影响。研究表明,华夏学院2011年期末考试英语完形填空项目具有一定的内容效度和环境效度。但是,信度系数值不够高,一些项目的区分度值和难易值度不理想,对评分效度构成了负面的影响。就后果效度依据而言,考试对考生及教师既产生了正面的影响,也造成了负面的影响。就后果效度依据而言,考试对考生及教师既产生了正面的影响,也造成了负面的影响。基于研究的结果,作者提出了几点提高完形填空项目效度研究的措施。与此同时,就完形填空对教学的启示提出了一些尝试性的建议,如提倡词汇教学在语境中进行,加强文章句子间的理解以及培养学生的语篇意识等。

论文目录

• 摘要
• Abstract
• List of Figures and Tables
• Abbreviation
• Chapter 1 Introduction
• 1.1 The Need for the Study
• 1.2 The Goal of the Study
• 1.3 The Structure of the Thesis
• Chapter 2 Literature Review
• 2.1 Researches on Cloze Test
• 2.1.1 Researches on Cloze Test Abroad
• 2.1.2 Researches on Cloze Test At Home
• 2.2 Researches on Types of Cloze Test
• 2.2.1 The Fixed-Ratio Cloze
• 2.2.2 The Rational Cloze
• 2.2.3 The Multiple-Choice Cloze
• 2.2.4 The C-test
• 2.3 The Relative Validation Researches on Cloze Test
• 2.3.1 Validation Researches on Cloze Test Abroad
• 2.3.2 Validation Researches on Cloze Test at Home
• Chapter Three Theoretical Foundation
• 3.1 The Theoretical Framework of Validation Research by Weir C.J
• 3.1.1 The Definition of Validity
• 3.1.2 The Nature of Test Validity
• 3.1.3 Types of Validity Evidence
• 3.2 The Requirements for the Cloze Test in Huaxia College's English Final Examination Testing Syllabus
• 3.3 The Test Domain of the Cloze Test
• Chapter 4 Description of the Research
• 4.1 Research Purpose
• 4.2 Research Questions
• 4.3 Participants
• 4.4 Research Instrument
• 4.5 Data Collection
• 4.6 Data Analysis
• Chapter 5 Research Results and Discussion
• 5.1 The Overall Picture of the Cloze Test
• 5.1.1 Distribution of the Total Scores
• 5.1.2 Central Tendency and Dispersion
• 5.1.3 Brief Summary
• 5.2 Content Validity
• 5.2.1 Content Relevance
• 5.2.2 Content Coverage
• 5.2.3 Brief Summary
• 5.3 Context Validity
• 5.3.1 Task Setting
• 5.3.2 Task Demands
• 5.3.3 Test Administration
• 5.3.4 Brief Summary
• 5.4 Scoring Validity
• 5.4.1 Internal Consistency
• 5.4.2 Marker Reliability
• 5.4.3 Item Difficulty and Item Discriminability
• 5.4.4 Brief Summary
• 5.5 Consequential Validity
• 5.5.1 Impact on Educational System and Society
• 5.5.2 Impact on Test Takers
• 5.5.3 Impact on Teachers
• 5.5.4 Brief Summary
• Chapter 6 Implications and Conclusion
• 6.1 Implications for the Test Validity
• 6.2 Implications for English Teaching
• 6.2.1 Teaching Words in Context
• 6.2.2 Enhancing Intersentential Comprehension
• 6.2.3 Cultivating Discourse Awareness
• 6.3 Conclusion
• Bibliography
• Appendix Ⅰ
• Appendix Ⅱ
• Appendix Ⅲ
• Appendix Ⅳ
• Appendxi Ⅴ
• Acknowledgements