劉莉媛

（桂林理工大學(xué)外國語學(xué)院，廣西 桂林，541004）

CET-6聽力試題結(jié)構(gòu)效度研究
——以2016年6月CET-6聽力理解試題為例

劉莉媛

（桂林理工大學(xué)外國語學(xué)院，廣西 桂林，541004）

效度是評判一套試題質(zhì)量的主要標(biāo)準(zhǔn)，結(jié)構(gòu)效度又是其核心。結(jié)構(gòu)效度的高低直接關(guān)系試題質(zhì)量和對考生能力的檢測程度。大學(xué)英語六級考試是非英語專業(yè)學(xué)生最重要的英語水平測試，而聽力部分又是其重難點。現(xiàn)選取2016年6月CET-6真題為研究對象，對其聽力理解部分進(jìn)行結(jié)構(gòu)效度分析，對CET-6聽力試題的結(jié)構(gòu)效度從宏觀與微觀角度進(jìn)行了深入探索，得出其結(jié)構(gòu)效度較高，對大學(xué)英語聽力教學(xué)具有正面引導(dǎo)作用的結(jié)論。

CET-6；聽力理解；結(jié)構(gòu)效度

一、引言

隨著我國經(jīng)濟(jì)的發(fā)展，國際交流的機會日益增多，以及大數(shù)據(jù)時代的急速到來，對當(dāng)代大學(xué)生英語交際能力的要求越來越高。大學(xué)英語六級考試是檢驗非英語專業(yè)學(xué)生英語能力和水平的重要考試，在當(dāng)下中國發(fā)展與國際經(jīng)濟(jì)緊密聯(lián)系的大背景下，英語六級的通過情況與大學(xué)生就業(yè)能力的強弱直接掛鉤，通過英語六級，表明學(xué)生具備一定的外語水平，能夠在人才市場贏得一定優(yōu)勢。如今，英語六級已經(jīng)成為大學(xué)生必不可少的求職砝碼。而相對一紙證書，比過級更重要的是實實在在的英語交際能力。外語聽、說、讀、寫四項基本能力中，聽力能力是英語四項基本能力之首，也是練就其他三項能力的基礎(chǔ)之一。同樣是語言輸入能力，聽比讀的效率更高，單位時間輸入的信息量更大，交際中的互動性更強，因此，在當(dāng)前大學(xué)英語教學(xué)改革的大背景下，要高度重視大學(xué)英語四、六級考試尤其是聽力測試對大學(xué)生英語聽力學(xué)習(xí)和大學(xué)英語聽力教學(xué)的正面引導(dǎo)作用。一套優(yōu)質(zhì)的英語試題，其結(jié)構(gòu)效度是關(guān)鍵，只有結(jié)構(gòu)效度高的聽力試題，才能了解學(xué)生的聽力能力和水平，并且積極發(fā)揮聽力測試對教與學(xué)的正面引導(dǎo)作用。

二、語言測試的結(jié)構(gòu)效度

語言能力本身是無法直接被測量的，語言能力是潛在的，隱藏的，我們通過試題測出的得分不是語言學(xué)習(xí)者的語言能力，只是語言能力的一種數(shù)字表征[1]。例如在口語能力測試中我們設(shè)立如“準(zhǔn)確性”、“流利性”、“得體性”等各種評判標(biāo)準(zhǔn)都是一種構(gòu)想。指出“所謂構(gòu)想,就是假設(shè)的概念”[2]。因此，關(guān)于語言能力的各種規(guī)定性要求都是假設(shè)和構(gòu)想，是考察人依據(jù)現(xiàn)實生活或具體領(lǐng)域?qū)φZ言熟練程度的要求對受試者提出的。有一種觀點認(rèn)為:效度是指所考的是否就是設(shè)計人想要考的內(nèi)容，或者說，在多大程度上考了想要考的。

語言測試的目的就是要通過試題和得分展現(xiàn)語言學(xué)習(xí)者的語言能力和對語言知識的掌握情況，那么試題的結(jié)構(gòu)效度就是關(guān)鍵[3]。結(jié)構(gòu)效度是一份試卷是否考到及在多大程度上考了我們之前構(gòu)想的語言能力。以考查獲取信息能力的閱讀理解題為例，滿足上述要求的閱讀理解題便是一份結(jié)構(gòu)效度高的測試題，所得分?jǐn)?shù)可代表受試者的閱讀理解力，反之，一份結(jié)構(gòu)效度低的試題對考生閱讀理解能力的探測和考察性就差，最終所得分?jǐn)?shù)意義不大。由此可見，結(jié)構(gòu)效度是考生語言能力測出與否的保證和前提，分?jǐn)?shù)是受試者語言能力的呈現(xiàn)形式，對考生而言，分?jǐn)?shù)結(jié)合結(jié)構(gòu)效度的解釋才是客觀合理的。

三、聽力試題的結(jié)構(gòu)效度

一直以來，對于語言是如何被理解的以及語言理解能力的探索發(fā)現(xiàn)從未停止，且日益深入。語言理解是一個復(fù)雜的過程，語言理解能力涉及人腦、思維等多個機制的協(xié)同運轉(zhuǎn)，人們對此進(jìn)行了不懈的研究和探索，語言理解能力也是所有語言學(xué)習(xí)者最為關(guān)心和亟待提高的對象[4]。對于聽力理解能力，語言研究者們提出了多個描述模型，其中20世紀(jì)90年代Bachman和Palmer提出的聽力理解能力描述框架——聽力能力分為語言能力（language competence）和策略能力（strategic competence）。語言能力是指語法、語篇、語用和社會語言學(xué)等四個方面的知識；策略能力是指聽者在聽的過程中如何運用語言知識的能力，這是一種執(zhí)行能力,也是如何利用上述各種聽力策略以達(dá)到聽懂目的語的能力。Purpura根據(jù)實證研究認(rèn)為策略能力至少包括認(rèn)知策略和元認(rèn)知策略。認(rèn)知策略是有意識或無意識的理解、儲存和使用語言知識的心智活動過程[5]。元認(rèn)知策略包括用于監(jiān)察與管理認(rèn)知活動的自我管理活動。西方測試學(xué)界借此模型沿用至今。

聽力測試是語言測試學(xué)中考察學(xué)生信息獲取能力的C類試題，聽力理解能力測試的目的在于考察學(xué)生是否具有當(dāng)前階段所應(yīng)具備的語言理解能力，聽力測試是了解學(xué)生聽力理解能力和水平的方式，由此，聽力測試的結(jié)構(gòu)效度便意指聽力試題是否以及在多大程度上考察出學(xué)生的語言理解能力[6]。

四、CET-6聽力試題的結(jié)構(gòu)效度

聽力試題的結(jié)構(gòu)效度是指試題是否以及在多大程度上考察出學(xué)生當(dāng)前所應(yīng)具備的語言能力[7]。筆者認(rèn)為，CET-6聽力試題的結(jié)構(gòu)效度要結(jié)合以獲取信息為目的的C類試題和《大學(xué)英語六級考試大綱》共同制定，同時也要結(jié)合測試學(xué)界的學(xué)者提出的各種描述模型。語言四項基本能力“聽、說、讀、寫”中的“聽”是語言輸入過程，與輸出相對，是語言輸出能力形成的前提和基礎(chǔ)，輸入即信息獲取，聽力測試就是考察學(xué)生是否獲取所需信息?！洞髮W(xué)英語六級考試大綱》要求學(xué)生能聽懂英語講課，并能聽懂題材熟悉、句子結(jié)構(gòu)比較簡單、基本上沒有生詞、語速為每分鐘130-150詞的簡短會話、談話、報道或講座，掌握其中心大意，抓住要點和有關(guān)細(xì)節(jié)，領(lǐng)會講話者的觀點和態(tài)度。由此可見，CET-6考試大綱已經(jīng)將西方語言學(xué)家提出的聽力測試結(jié)構(gòu)效度模型——語言知識與策略能力包含在內(nèi)，也充分體現(xiàn)了C類試題即信息獲取類試題的特征。CET-6測試的結(jié)構(gòu)效度最終落實于題型和題目的設(shè)計情況，題型和題目設(shè)計水平的高低決定了試題是否能探測和了解學(xué)生多層次的語言能力和真實的語言水平，也就決定了試題結(jié)構(gòu)效度的實現(xiàn)情況。CET-6聽力理解部分由聽力對話、短文和講座三部分組成，題型均為多項選擇題，考生只能預(yù)覽所提供的選項，所問問題緊隨錄音材料，不在試卷上呈現(xiàn)。聽力題材選用對話、講座、廣播電視節(jié)目等更具真實性的材料[8]。

五、CET-6聽力試題結(jié)構(gòu)效度宏觀分析

CET-6聽力理解試題共分為聽力對話、短文和講座三大部分。結(jié)合下表，從橫、縱兩個維度對2016年6月CET-6聽力理解試題結(jié)構(gòu)效度作宏觀分析：

從表1中可以得出：一，聽力試題的考點有兩類：主旨大意和細(xì)節(jié)信息獲取，各占比為6:25，以細(xì)節(jié)信息獲取為主。二，考點類型中深層理解、歸納、字面理解的比例為6:2:17，以深層和字面理解題為主。三，25道聽力理解選擇題中，與材料核心信息相關(guān)程度達(dá)中等的題只有一道，其余24題全部為高度相關(guān)。四，強干擾項數(shù)為1、2、3的題目總數(shù)之比為5:9:11，有五分之四的題目強干擾項數(shù)達(dá)兩項以上。

表1 2016年6月CET-6聽力試題整體分析

說明：1.表中關(guān)聯(lián)度指該題與材料核心信息的關(guān)聯(lián)程度；2.強干擾項指該題干擾項中似乎可能性高的干擾項數(shù)，“似乎可能性高”的標(biāo)準(zhǔn)為：一，該選項的中心詞在錄音中出現(xiàn)過；二，該選項有道理、講得通，但不是錄音原文中的項，不是正確答案，滿足其中一條即為“似乎可能性高”的強干擾項。

橫向地看，分析可得：一，就考點與考點類型的搭配來看，同一考點與不同的考點類型搭配，沒有固定模式，保證了試題的結(jié)構(gòu)效度。若考點中的細(xì)節(jié)信息理解只與字面理解的考點類型搭配，那么難度不夠，所考察的能力有限，試題的結(jié)構(gòu)效度受到影響；如果細(xì)節(jié)信息與深層和字面理解的考點類型都有搭配，那么試題難度和所考能力則較為均衡和全面，試題的結(jié)構(gòu)效度得以保證。二、就考點類型與考題難度的聯(lián)系來看，深層理解題整體偏難，字面理解題難度系數(shù)略低，比較容易，深層理解題不能從所聽到的材料錄音中直接得出答案，需要將所聽信息進(jìn)行加工，而字面理解題可直接得出答案。以上聽力理解題中，二者總體比例適當(dāng)，保證了試題的結(jié)構(gòu)效度。三、多數(shù)字面理解題難度為“易”，而少數(shù)字面理解題難度為“中”，具有特殊性，說明題目難度不僅與考點類型單項相關(guān)，也與強干擾項數(shù)有關(guān)，對于考生而言，強干擾項的設(shè)計對其在真實考場上應(yīng)試的影響是直接的，答對此題的難度、語言知識及策略能力隨之增加，考生是否掌握相應(yīng)的語言理解能力則清晰呈現(xiàn)，試題的結(jié)構(gòu)效度予以實現(xiàn)[9]。

縱向地看，分析可得：一、從考點設(shè)計上看，聽力理解題達(dá)到了《大學(xué)英語六級考試大綱》中把握材料中心大意，抓住細(xì)節(jié)和要點的要求。二、從考點類型的編排上看，深層和字面理解為主同時兼顧歸納能力的考察與西方現(xiàn)行的聽力能力描述模型一致，符合主流。三、從與核心信息的關(guān)聯(lián)程度總體統(tǒng)計上看，此項指數(shù)相當(dāng)之高，說明考點與核心信息的關(guān)聯(lián)程度很高，對考生是否具有考綱所要求的主題與要點把握能力的考察就越精準(zhǔn)、越客觀和越有說明性，對實現(xiàn)聽力理解題結(jié)構(gòu)效度的積極作用就越大。四，從各題高“似乎可能性”的強干擾項數(shù)量總體統(tǒng)計上看，高“似可能性”強干擾項可以幫助聽力試題更好地實現(xiàn)結(jié)構(gòu)效度，本套聽力試題此項指數(shù)也較高，指數(shù)越高，表明該部分試題對學(xué)生能力的考察越全面，試題的難度也略微增加，同時也能夠檢驗出學(xué)生是否通過運用語言知識和策略能力真正“聽”到了題目所要考的信息，達(dá)到了C類信息獲取性試題的檢驗?zāi)康?，而不是依?jù)卷面所給的四個選項憑借邏輯和常識進(jìn)行相互比較與排除僥幸得出答案，所以，適當(dāng)數(shù)量的高似乎可能性強干擾項對實現(xiàn)聽力理解題的結(jié)構(gòu)效度具有重要意義[10]。

至此，從橫縱兩個方面可以得出：2016年6月CET-6聽力理解題的結(jié)構(gòu)效度較高。

六、CET-6聽力試題結(jié)構(gòu)效度微觀分析

從以上橫、縱兩個角度的分析要點中選取兩個影響結(jié)構(gòu)效度的突出方面，結(jié)合實例對CET-6聽力試題的結(jié)構(gòu)效度作微觀分析，進(jìn)一步探討CET-6聽力試題的結(jié)構(gòu)效度。

（一）考點與考點類型的搭配對結(jié)構(gòu)效度的影響分析

考點與考點類型的搭配對結(jié)構(gòu)效度的影響較大，直接關(guān)系到考察的能力層次高低，最終影響試題的結(jié)構(gòu)效度。下面以16年6月CET-6聽力試題第3題為例分析二者的搭配對結(jié)構(gòu)效度的影響。一般而言，細(xì)節(jié)信息考點一般與字面理解的考點類型搭配，且在本套聽力理解試題中，此種配型占主要，但本套試題的第3題的考點雖為細(xì)節(jié)信息理解與把握，但是出題人設(shè)計的考點類型卻是比字面理解難度稍高的深層理解類型。題目設(shè)問為“那個男人認(rèn)為在商業(yè)競爭中他應(yīng)該做到什么”，材料原文所給的細(xì)節(jié)信息是“The company culture must switch from these point-in-time innovations to a continuous pipeline of innovations from everywhere and everyone”，正確選項C為Innovate constantly，對比本套其它細(xì)節(jié)信息理解題的答案，C選項不是錄音材料的原文表述，其中“Innovate”不是原文中的“innovations”，是它的動詞原形，需要考生在聽后做簡單的轉(zhuǎn)換，本題對考生深層理解能力的考察著重體現(xiàn)在理解原文“continuous pipeline”，正確選項中的“constantly”與原文的“continuous”意義相近，與“point-in-time”意義相對，且屬于關(guān)鍵或要點信息，對于實戰(zhàn)中的考生而言，同樣是細(xì)節(jié)信息理解題，不能像做簡單的字面理解題一樣，將備選項與原文信息一一比對，找出備選項與材料原文的單詞完全相同的一項，而要將原文的“point-in-time”與“continuous pipeline”真正理解后才能選出正確答案。類似的利用搭配考點與考點類型提升難度的題還有第2和第22題。由此可見，考點與考點類型的搭配直接影響了16年6月CET-6聽力理解題考察的能力層次高低，最終影響了本套試題的結(jié)構(gòu)效度。

（二）強干擾項設(shè)計對結(jié)構(gòu)效度的影響分析

似乎可能性高的強干擾項對聽力試題的結(jié)構(gòu)效度影響較大，直接關(guān)系到考題難度和能力考察面的寬窄，最終影響試題的結(jié)構(gòu)效度[11]。以16年6月CET-6聽力理解試題第20題為例分析：該題的錄音材料主題為環(huán)境科學(xué)，考點是細(xì)節(jié)信息，考點類型是字面理解，雖是字面理解題，但難度為“中”，原因在于選擇項中除正確選項D以外的其他三項的似乎可能性都很高，均為強干擾項。題目設(shè)問為“關(guān)于北冰洋地區(qū)該報告談到了什么”，A選項“Eighty percent of the ice disappears in summer time（80%的冰在夏季消失）”內(nèi)容上與材料中的重要信息“北冰洋冰川融化加速”高度相關(guān)，但不符合事實，因為錄音前段提到，覆蓋在北冰洋的冰在10年后大約會減少80%，而不是A項所說“80%的冰在夏季消失”。B選項“Most of the ice was accumulated over the past centuries（大部分的冰是在過去的幾百年累積成的）”和C選項“The ice ensures the survival of many endangered species（冰確保了許多瀕危物種的存活）”與材料主題緊密相關(guān)，也符合邏輯，但在錄音中并未提及，屬于主觀臆造信息，不能被選。由此可見，此題借助強干擾項的設(shè)計，不僅考察學(xué)生是否具備大綱要求的掌握中心大意，抓住要點和有關(guān)細(xì)節(jié)的能力，還考察了學(xué)生的聽力策略能力，即能否運用認(rèn)知策略對所聽信息進(jìn)行理解與儲存，面對高似乎可能性的強干擾項能夠敏感、快速地提取和使用之前存儲的信息予以辨別（B、C選項）、對比（A選項）和排除。類似的利用設(shè)計強干擾項覆蓋多項能力的題還有第4，7、9、13題。由此可見，16年6月CET-6聽力理解題強干擾項的設(shè)計直接對接多項語言能力的考察，決定了本套試題的結(jié)構(gòu)效度[12]。

七、結(jié)語

綜上可得：2016年6月CET-6聽力試題的結(jié)構(gòu)效度較高，符合C類信息獲取性試題、《大學(xué)英語六級考試大綱（聽力部分）》的能力要求，以及當(dāng)前主流的聽力能力描述模型。聽力測試的最終目的是要提升學(xué)生的聽力水平，全面提高學(xué)生的英語交際能力，發(fā)揮語言測試的意義性原則，必然會對大學(xué)英語聽力教學(xué)產(chǎn)生正面的引導(dǎo)作用。

[1]Bachman，L.F.Fundamental Consideration in Language Testing [M].Oxford:Oxford University Press，1990.

[2]Bachman，L.F.&A.S.Palmer..Language Testing in Practice[M]. Oxford:Oxford University Press，1996.

[3]Buck，G.Assess Listening[M].Cambridge:Cambridge University Press，2001.

[4]Canale，M.On Some dimensions of language proficiency[A]，InJ. W.Oller（ed.）Issues in Language Testing Research[C].Row-ley，MA:Newbury House，1983.

[5]Crocker，L.&J.Algina.Introduction to Classical and Modern Test Theory[M].New York:CBS College Publishing，1986.

[6]陳宏.在語言能力測驗中如何建立結(jié)構(gòu)效度[J].語言教學(xué)與研究，1997（2）.

[7]高蘭生，陳輝岳.英語測試論[M].南寧:廣西教育出版社，1996.

[8]李筱菊.語言測試科學(xué)與藝術(shù)[M].長沙:湖南教育出版社，1997.

[9]劉潤清.語言測試和它的方法[M].北京:外語教學(xué)與研究出版社，1991.

[10]劉潤清，韓寶成.語言測試和它的方法[M].北京:外語教學(xué)與研究出版社，2000.

[11]張凱.關(guān)于結(jié)構(gòu)效度[J].語言教學(xué)與研究，1998（4）.

[12]李筱菊.語言測試科學(xué)與藝術(shù)[M].長沙:湖南教育出版社，1997.

On the Construct Validity of CET-6 Listening Subtest

LIU li-yuan
(Guilin University of Technology,College of Foreign studies,Guilin 541004,Guangxi)

Validity is a major criterion of evaluating a test and construct validity is the core of it.The level of construct validity has a close relationship with the quality of a test and how much subjects have achieved in it.CET-6 is the most important test for non-English majors,and listening subtest is a key and difficulty part.CET-6 in the June of 2016 is selected as the case of study,and its construct validity is analyzed.The construct validity of CET-6 is probed in this paper,aiming to improve its construct validity and perfect its designed quality.

CET-6;listening subtest;construct validity

H31;G424.79

A

1671-5004（2017）02-0090-04

2017-2-21

廣西研究生教育創(chuàng)新計劃項目“大數(shù)據(jù)時代背景下廣西理工類大學(xué)大學(xué)生外語素質(zhì)培養(yǎng)創(chuàng)新模式研究”階段性研究成果。

劉莉媛（1991-），女，湖北枝江人，桂林理工大學(xué)外國語學(xué)院在讀研究生，研究方向：英語教學(xué)。