新视野大学英语在线系统试题库学业测试卷信度效度分析-reliability and validity analysis of academic test paper in new horizon college english online system test bank.docxVIP

ii ii 摘 要 大学英语课程学业测试的有用性往往被人们忽视。基于 Bachman 的测试有用性 的理论，本文试图评估与新视野大学英语系列教材配套的在线系统试题库测试卷的 信度和效度，由此推断出学习者是否达到了大学英语课程教学要求以及课程标准对 于语言能力的要求，即听力理解能力，阅读理解能力，翻译能力，书面表达能力， 以及英语综合应用能力。 本文的研究问题为：1. 新视野大学英语测试卷的信度如何？ 2. 新视野大学英语 测试卷的效度如何？为了回答以上两个研究问题，武汉某高校大学一年级 117 名学 习者接受了测试，测试卷的单项成绩和试卷总分均被纳入研究范围。作者在研究中 收集了两方面的数据：定量数据和定性数据。定量数据源于 SPSS 软件对学生本次 期末考试成绩的单项和总分数据分析得出的结果，包括正态分布数据描述，信度系 数 Cronbach α，以及相关分析和因子分析得到的数据；定性数据来自于对其中 6 位 学习者的访谈。 本研究结果表明：新视野大学英语题库试题具有一定的信度和结构效度，教师 从学生的成绩反映可以推断出学生的英语语言能力水平。本次试卷未能准确测量学 生的阅读能力，原因是试题本身过于容易。不仅如此，研究还发现用合适词以及正 确形式填空一题难度过大，接近半数学习者得分低，个别试题存在设计缺陷。通过 本次研究，作者的建议是：在正式测试之前最好进行预测以提高试卷质量；出版商 应格外注意新视野题库第二级的阅读题题库的质量问题。 关键词：新视野大学英语题库试题 测试的有用性 信度 效度 iii iii Contents Abstract i 摘 要 ii HYPERLINK \l _TOC_250021 Contents iii HYPERLINK \l _TOC_250020 Introduction 1 HYPERLINK \l _TOC_250019 Literature Review 7 HYPERLINK \l _TOC_250018 Language testing development 7 HYPERLINK \l _TOC_250017 Language ability 13 HYPERLINK \l _TOC_250016 Reliability and validity 14 HYPERLINK \l _TOC_250015 Test development. 17 HYPERLINK \l _TOC_250014 Methodology 35 HYPERLINK \l _TOC_250013 Research questions 35 HYPERLINK \l _TOC_250012 Subjects 36 HYPERLINK \l _TOC_250011 Instruments 39 HYPERLINK \l _TOC_250010 Data collection 40 HYPERLINK \l _TOC_250009 Data analysis 41 HYPERLINK \l _TOC_250008 Results and Discussion 43 HYPERLINK \l _TOC_250007 Description of normal distribution 43 HYPERLINK \l _TOC_250006 Reliability of the NHCE test. 46 HYPERLINK \l _TOC_250005 Validity of the NHCE test 47 HYPERLINK \l _TOC_250004 Item analysis of multiple choices and blank filling testing items 55 HYPERLINK \l _TOC_250003 Conclusion 59 HYPERLINK \l _TOC_250002 References 62 HYPERLINK \l _TOC_250001 Acknowledgments 67 HYPERLINK \l _TOC_250000 Appendix I NHCE test paper 68 PAGE PAGE iv Appendix II Answers for NHCE 2 final exam 81 Appendix III Individual and global scores 83 Appendix IV Total score frequency 87 Appendix V Facility value 89 Appendix VI Interview question