华语文阅读测验信效度分析与垂直等化研究-国家华语测验推动工作.pdfVIP

華語文教學研究11.1:99-126 , 2014 華語文閱讀測驗信度效度分析與垂直等化研究 藍珮君 陳柏熹 國家華語測驗推動工作委員會 國立臺灣師範大學 教育心理與輔導學系 摘要 本文旨在探討華語文閱讀測驗四個測驗等級：基礎級、進階級、高階 級與流利級的信度與效度表現 ，並將四個等級試題難度連結至同一量尺上。 樣本來自 2011 年 5 月與 11 月正式考試 ，及 2012 年預試之考生作答反應 資料，以古典測驗理論與試題反應理論進行分析。研究結果顯示：1. 閱讀 測驗信度良好，各等測驗KR20 信度係數接近或達到0.90 以上 ，IRT 估計 標準誤換算後的信度數值皆達到 0.90 以上，且各測驗通過門檻的考生能力 值亦有較高的測驗訊息量與較低的估計標準誤；2. 閱讀測驗具有建構效度 ， 各等級因素分析結果抽出閱讀理解單一因素，解釋變異量在66.91%以上 ， 且各等級試題與模式適配比例達 87.5%以上；3. 四等測驗試題難度分佈良 好 ；4. 進階與高階級測驗折半合併為一等測驗，通過門檻之測驗訊息量及 估計標準誤 ，與原進階級測驗相當，略差於原高階級測驗，將此兩等級測 驗合併為一等測驗在實務上應為可行 ，惟組卷時試題難度比例需再做調 整 。 關鍵詞 ：華語文能力測驗 信度 效度 試題反應理論 垂直等化 1. 緒論 由國家華語測驗推動工作委員會 （簡稱華測會）所研發的華語文能力測 驗（Test of Chinese as Foreign Language ，簡稱TOCFL ）含括四種測驗類別：  本研究感謝教育部 「國際與兩岸教育司」、「邁向頂尖大學計畫」與「國科會跨國 頂尖研究中心計畫」(NSC 103-2911-I-003-301)支持。 99 華語文教學研究 聽力測驗、閱讀測驗、口語測驗以及寫作測驗。聽力與閱讀測驗於 2003 年 12 月在臺灣地區舉辦第一次正式考試 ，從 2006 年開始，華測會也陸續在海 外各地舉辦聽力與閱讀測驗的正式考試和預試。2012 年已擴大至26 國40 個 地區進行施測，截至2013 年年底 ，臺灣與海外地區累積報考TOCFL 聽力與 閱讀測驗考試的考生人數已突破15萬人，詳見華測會官網 （http://www.sc-top. org.tw/picture/tocfl_150K.png ）。 華語文聽力與閱讀測驗開辦至今將近 10 年的時間，試題品質的控管與測 驗信度、效度的結果一直為外界所關切，華測會為了讓華語教學及語言測驗 等相關領域的專家學者了解華語文能力測驗研發現況，本研究將呈現華語文 能力測驗信度與效度分析結果，盼能引發討論，藉以讓華語文能力測驗的發 展更臻完善。惟華語文聽力與閱讀測驗雖同屬語言能力的接收能力，但本質 上仍為不同的語言能力，測驗相關分析皆分別進行 ，聽力與閱讀測驗也各有 各的試題難度量尺 ，故本研究先探討並報告閱讀測驗部分的信度與效度 。 國內現行之華語文閱讀測驗為電腦化測驗（Computer based test ，簡稱 CBT ），未來目標為進一步發展至電腦適性化測驗（Computerized adaptive testing ，簡稱CAT ）。相較於 CBT ，CAT 可縮短測驗長度，有效節省考生測 驗時間，且仍可提供穩定可靠的測驗分數。然而要發展CAT ，首要工作便是 建立起橫跨四個等級的大題庫，目前進階、高階與流利測驗試題