張海俠
PISA閱讀分析及對(duì)我國(guó)試題的啟發(fā)
張海俠
閱讀素養(yǎng)測(cè)評(píng)是國(guó)際學(xué)生評(píng)估項(xiàng)目(PISA)的主測(cè)之一,試題的命制在整個(gè)測(cè)評(píng)過(guò)程中至關(guān)重要。本文對(duì)PISA閱讀素養(yǎng)測(cè)評(píng)試題進(jìn)行研究,發(fā)現(xiàn)其在設(shè)計(jì)理念、選用材料、評(píng)價(jià)層級(jí)、題目及參考答案的編制等方面優(yōu)勢(shì)突出,這些為我國(guó)閱讀測(cè)試試題的命制提供了諸多值得借鑒的經(jīng)驗(yàn)。
PISA;閱讀測(cè)評(píng);試題命制
作為一項(xiàng)跨國(guó)研究項(xiàng)目,PISA自2000年開(kāi)始實(shí)施,至今已經(jīng)歷了6次正式測(cè)試,不論是在閱讀、數(shù)學(xué)、科學(xué)等領(lǐng)域,還是在題目編制、閱卷編碼、統(tǒng)計(jì)評(píng)價(jià)等環(huán)節(jié),都已經(jīng)相當(dāng)成熟。在很多方面值得我們國(guó)內(nèi)教育學(xué)習(xí)借鑒,本文僅以閱讀測(cè)試為例,試從命題的角度談?wù)勎覀兛梢詫W(xué)習(xí)借鑒的幾個(gè)方面。
PISA是對(duì)15歲的學(xué)生進(jìn)行測(cè)試,但它的目的卻不是對(duì)測(cè)試的學(xué)生進(jìn)行排名,而是為了發(fā)展,并且最終落腳在國(guó)家(地區(qū))的發(fā)展上。
正如“提高全世界學(xué)習(xí)成果:PISA如何幫助”中所說(shuō):“全世界的決策制定者認(rèn)識(shí)到招收所有孩子入學(xué)并保持他們?cè)谛?duì)社會(huì)和經(jīng)濟(jì)發(fā)展至關(guān)重要?!盵1]PISA通過(guò)測(cè)試即將步入社會(huì)的在校學(xué)生能否運(yùn)用在校學(xué)習(xí)的知識(shí)和技能來(lái)解決未來(lái)工作、生活中的問(wèn)題,是否為迎接未來(lái)生活的挑戰(zhàn)而做好了準(zhǔn)備來(lái)評(píng)價(jià)國(guó)家的教育政策。對(duì)于參與國(guó),如何從參加PISA中獲益?PISA項(xiàng)目也明確指出:“PISA是一個(gè)強(qiáng)大的決策工具。通過(guò)參與,國(guó)家獲得教育系統(tǒng)質(zhì)量和公平的全面評(píng)價(jià),這有助于根據(jù)時(shí)間的推進(jìn)規(guī)范他們的進(jìn)展,建立國(guó)家目標(biāo)并對(duì)這些目標(biāo)進(jìn)行評(píng)價(jià),以及建立更好更公平的學(xué)習(xí)成果的路徑。與全球同行相比,國(guó)家能夠看到他們所處的位置并為他們所在的區(qū)域提供一個(gè)相互學(xué)習(xí)、相互促進(jìn)的機(jī)會(huì)?!盵2]可見(jiàn),PISA測(cè)試是使參與國(guó)(地區(qū))通過(guò)比較,發(fā)現(xiàn)差距,反思自己的教育,并適時(shí)調(diào)整、改善教育政策,是為了國(guó)家教育更好地發(fā)展。
具體到閱讀測(cè)試,PISA對(duì)閱讀素養(yǎng)的定義是:“閱讀是理解、運(yùn)用、反思并積極參與閱讀書(shū)面篇章,以增進(jìn)知識(shí),發(fā)揮潛能,參與社會(huì),實(shí)現(xiàn)個(gè)人的目標(biāo)。”[3]概念中所說(shuō)“理解”“運(yùn)用”“反思”“參與”會(huì)用到在校所學(xué)的,但不會(huì)局限于在校所學(xué),還會(huì)涉及聯(lián)系生活、聯(lián)系實(shí)際,但這些都不是該項(xiàng)目的目的,目的是“增進(jìn)知識(shí),發(fā)揮潛能,參與社會(huì),實(shí)現(xiàn)個(gè)人的目標(biāo)”,或者說(shuō)目的是參與社會(huì)、實(shí)現(xiàn)個(gè)人目標(biāo),也是為了發(fā)展。
而我們的語(yǔ)文測(cè)試,盡管課標(biāo)中也有“為學(xué)生的全面發(fā)展和終身發(fā)展打下基礎(chǔ)”的表述,但實(shí)際上我們的測(cè)試目的很直接、單純。在具有選拔性功能考試——高考的指引下,學(xué)生在18歲之前的幾乎所有考試都是為了高考,不論是大型一點(diǎn)的考試,如中考、學(xué)業(yè)水平考試,還是平時(shí)的小考,都以檢測(cè)、選拔為目的,是考查學(xué)生對(duì)前一段時(shí)間所學(xué)習(xí)內(nèi)容的掌握程度,測(cè)試的內(nèi)容是所學(xué)習(xí)的知識(shí)與解決當(dāng)下問(wèn)題的能力,而不是面向未來(lái)的發(fā)展。
簡(jiǎn)單說(shuō),PISA閱讀測(cè)試在選用材料上的要求有:從文本的呈現(xiàn)即文本形式上可選用連續(xù)型文本、非連續(xù)型文本、混合文本、多重文本;從文本的修辭結(jié)構(gòu)即文本類型上可以為描述型、敘述型、說(shuō)明型、論證型、指示型、記錄型;從情境所屬上符合個(gè)人應(yīng)用即滿足個(gè)人的興趣、公共應(yīng)用即和更廣泛的社會(huì)有關(guān)、教育情境應(yīng)用即用于教學(xué)、職業(yè)情境應(yīng)用即與工作有關(guān)。對(duì)2009年公開(kāi)題7個(gè)文本材料[4]的統(tǒng)計(jì)如表1所示。
從表1分布來(lái)看,7個(gè)文本材料可謂豐富多樣,在文本形式、文本類型以及情境方面都有所體現(xiàn)。而且文本具有以下特點(diǎn):①密切聯(lián)系生活。由于PI? SA測(cè)試是從學(xué)生將來(lái)的成人生活角度出發(fā),所以文本材料或者是學(xué)生真實(shí)生活中遇到的,如刷牙、手機(jī)的安全問(wèn)題、獻(xiàn)血,或者是對(duì)未來(lái)真實(shí)生活的模擬,如人生如戲、遠(yuǎn)距離辦公等。②善用圖表。在這7個(gè)材料中,刷牙、熱氣球、獻(xiàn)血3個(gè)材料用了圖示,手機(jī)的安全問(wèn)題、人生如戲、遠(yuǎn)距離辦公3個(gè)材料用了表格。使用圖表不但使文字條理清晰,也有助于理解材料。③篇幅短小。7個(gè)材料中,閱讀文字量普遍不大,最少的材料“刷牙”只有約190個(gè)字,最多的“人生如戲”約有950個(gè)字。
上述3個(gè)特點(diǎn),在我們的閱讀測(cè)試中很少體現(xiàn)。國(guó)內(nèi)閱讀測(cè)試,在文本形式上多集中在連續(xù)性文本(自2011年版課標(biāo)增加非連續(xù)性文本之后,在試題中也有非連續(xù)性文本一席之地了,但還是很少)。在文本類型上,基本上是記敘文、說(shuō)明文、議論文三分天下(這既與國(guó)際上所用修辭分類有關(guān),又與我國(guó)長(zhǎng)期以來(lái)的語(yǔ)文教育文體教學(xué)有關(guān))。在情境上,我們的測(cè)試根本沒(méi)有體現(xiàn)這個(gè)方面。我們所選用的閱讀材料考慮更多的是能夠?yàn)榭荚囁?,與盡量貼近學(xué)生的生活相比,我們更加注重的是材料的文學(xué)性、思想性。
PISA2015仍沿用PISA2009以來(lái)的三個(gè)認(rèn)知層級(jí),即檢索與獲取、整合與解釋、反思與評(píng)價(jià),這三個(gè)大方面又各有針對(duì)性,如圖1所示。
表1 2009年公開(kāi)題7個(gè)文本材料
PISA閱讀測(cè)試中每一道題都有清晰的能力和難度定位,以手機(jī)的安全問(wèn)題為例,對(duì)題目的能力層級(jí)和難度統(tǒng)計(jì)如表2所示。
應(yīng)該說(shuō)在三大能力中,檢索信息是相對(duì)較容易的題目,較難的是整合與解釋、反思與評(píng)價(jià)。在PI?SA2015閱讀素養(yǎng)框架中有這樣的表述:“教育的目標(biāo)已經(jīng)從僅僅收集和背誦信息轉(zhuǎn)向?qū)Ω訌V泛的知識(shí)概念的理解:‘知道的含義已經(jīng)從能夠記住信息轉(zhuǎn)向能夠發(fā)現(xiàn)并使用信息’(西蒙,1996)。如果個(gè)人能夠充分參與我們的以獲取知識(shí)為基礎(chǔ)的社會(huì),檢索、理解和反思各類信息的能力是必不可少的。因此,以評(píng)估結(jié)束義務(wù)教育的學(xué)生的閱讀素養(yǎng)的PISA框架,必須聚焦于超越課堂的全面理解文本信息的閱讀素養(yǎng)技能,包括發(fā)現(xiàn)、選擇、解釋和評(píng)價(jià)信息?!盵6]PISA試題與框架要求完全一致。
反觀我們的試題,通常在命題前的考綱中也會(huì)規(guī)定能力層級(jí),如高考語(yǔ)文卷考綱中規(guī)定“識(shí)記”、“理解”、“分析綜合”、“鑒賞評(píng)價(jià)”、“表達(dá)應(yīng)用”、“探究”六個(gè)能力層級(jí)。但每一層級(jí)的系數(shù)在怎樣的區(qū)域中,難度系數(shù)如何區(qū)分,在試題、參考答案中往往沒(méi)有體現(xiàn)或體現(xiàn)得不夠充分,甚至有的題目的層級(jí)往往模糊不清,區(qū)分很難。如“表達(dá)應(yīng)用”,考綱對(duì)此列出“正確使用標(biāo)點(diǎn)符號(hào)”、“正確使用詞語(yǔ)(包括熟語(yǔ))”、“辨析并修改病句”、“擴(kuò)展語(yǔ)句,壓縮語(yǔ)段”、“選用、仿用、變換句式”等7項(xiàng),但事實(shí)上,“表達(dá)應(yīng)用”不止這7項(xiàng),某種意義上講,“理解”“分析綜合”“鑒賞評(píng)價(jià)”“探究”也都屬于表達(dá)應(yīng)用。
PISA閱讀測(cè)試是把閱讀作為學(xué)習(xí)其他內(nèi)容、為生活做準(zhǔn)備以及參與公共活動(dòng)的工具,因此,測(cè)試的重點(diǎn)不是閱讀技巧本身,而是應(yīng)用閱讀能力解決實(shí)際問(wèn)題或?qū)W習(xí)新知識(shí)的能力。閱讀測(cè)試題型分為單項(xiàng)選擇題、復(fù)合式選擇題、封閉式問(wèn)答題、簡(jiǎn)答題、開(kāi)放式問(wèn)答題,不論是哪種題型,在上述文本形式及能力層級(jí)等要求指引下,所命制的題目靈活多樣,且指向性都很明確。如“刷牙”一文所命制的題目。
原文:我們刷牙的時(shí)間越長(zhǎng),越用力刷,我們的牙齒就刷得越干凈嗎?
圖1
表2
英國(guó)的研究者給出了否定的答案。他們確實(shí)嘗試過(guò)很多刷牙的方式,最后得出了刷牙的最佳方式。用適當(dāng)?shù)牧Χ人煞昼?,這樣的效果最佳。如果你太用力刷,會(huì)破壞牙齒琺瑯質(zhì),卻沒(méi)有刷掉食物殘留物。
牙齒領(lǐng)域的專家本特·漢森說(shuō),按照你握筆的方式來(lái)握住牙刷?!皬难例X的一角開(kāi)始,沿著牙齒逐一地刷,也別忘了刷你的舌頭,那上面也有細(xì)菌,如果不刷掉可能會(huì)導(dǎo)致口臭?!?/p>
問(wèn)題1:這篇文章講的是關(guān)于什么的?這道題要求在閱讀全文后能夠?qū)ξ恼聝?nèi)容進(jìn)行概括,形成廣義的、總體的理解,屬于整合與解釋層級(jí),題目以單項(xiàng)選擇題的形式出現(xiàn),更降低了題目的難度。問(wèn)題2:英國(guó)研究者推薦我們做什么?這是針對(duì)文章的部分內(nèi)容進(jìn)行提問(wèn),而且在文中有很明顯的提示語(yǔ)“英國(guó)研究者”,屬于檢索信息層級(jí),題目同樣是單項(xiàng)選擇題。問(wèn)題3:在本特·漢森看來(lái),你為什么要刷舌頭呢?同上題一樣,這道題也屬于檢索信息,并且提示語(yǔ)也很明顯,不過(guò)問(wèn)題是以開(kāi)放題的形式出現(xiàn),需要考生在檢索到信息后進(jìn)行一次簡(jiǎn)單的推斷與提煉,能夠答出“細(xì)菌”或者“口臭”的要點(diǎn)。問(wèn)題4:文章中提到“筆”的目的是?可以說(shuō)這是四道題目中最難的一個(gè),它要求考生在讀完文章后思考文中某個(gè)部分的意圖,屬于反思與評(píng)價(jià)文本形式層級(jí)。當(dāng)然,本題以單項(xiàng)選擇題的形式出現(xiàn),并且文中信息很明顯,運(yùn)用類比思維,則不難作答。
與PISA測(cè)試不同,我們的試題更加注重難度、信度、效度、區(qū)分度。試題難度的掌握,大致上可以分為較易、適中、較難和最難四等,在一般情況下,較易的試題占20%左右,適中和較難的試題各占30%,最難的試題占20%左右。[7]而且學(xué)科性極強(qiáng)。就語(yǔ)文學(xué)科看,測(cè)試更加注重閱讀知識(shí)與技巧,如選文通常選文體特點(diǎn)明顯的文章,通常從文體特點(diǎn)入手命題,說(shuō)明文大多集中在說(shuō)明方法、說(shuō)明順序、說(shuō)明語(yǔ)言以及說(shuō)明對(duì)象本身的特點(diǎn)上;議論文大多集中在論點(diǎn)、論證方法、論據(jù)、議論語(yǔ)言上;文學(xué)類文本大多從語(yǔ)言(修辭、表現(xiàn)力、理解內(nèi)涵)、主題、人物(性格、形象)、結(jié)構(gòu)等入手,命題陷入一種定式,學(xué)生答題幾乎也有相對(duì)固定的模式。不僅如此,有些題目因?yàn)橹赶虿幻鞔_,便造成了學(xué)生無(wú)從答題的情況,如從文段中抽出一句話來(lái),便問(wèn)這句話在文中的作用,因“作用”沒(méi)有指向,學(xué)生便不知道是要從結(jié)構(gòu)上還是從內(nèi)容上回答。
除閱讀材料和題目外,參考答案也是構(gòu)成一套試題的必不可少的一部分,并且參考答案提供得如何,對(duì)是否得分、得多少分都有極大的影響。而PI?SA閱讀測(cè)試不論是對(duì)選擇題,還是對(duì)開(kāi)放題,都有詳細(xì)的參考答案,尤其是開(kāi)放題,對(duì)于回答是否得分,得怎樣的分?jǐn)?shù),示例更加明確詳細(xì)。(盡管PISA測(cè)試是以編碼的形式給出示例,所給編碼不是具體的分?jǐn)?shù),給滿分編碼的也不意味著回答完美無(wú)缺,給零分編碼的也不意味著回答完全不對(duì)。)如2012年樣題“語(yǔ)言學(xué)習(xí)”[8]中的“問(wèn)題3”,問(wèn)題是“依據(jù)‘我的信息’,你認(rèn)為勒夫會(huì)采納‘語(yǔ)匯訓(xùn)練’的建議嗎?回答是或否,并給出一個(gè)理由?!边@是一道開(kāi)放式問(wèn)答題,考查的是反思與評(píng)價(jià)文本的內(nèi)容,即運(yùn)用文本信息評(píng)價(jià)廣告的價(jià)值。完整的參考答案如下:
滿分參考答案
編碼2:回答“不”,并參考信息的情境如可能是潛在的誤導(dǎo)或者冒險(xiǎn)、做廣告、表達(dá)不好,或者不是來(lái)自勒夫的朋友,必須與準(zhǔn)確理解“語(yǔ)匯訓(xùn)練”的信息一致。
?不,這樣的信息通常是垃圾郵件。
?不,他可能通過(guò)點(diǎn)擊鏈接威脅他的電腦。
?不,它甚至沒(méi)有用正確的語(yǔ)法書(shū)寫(xiě),怎么能教你呢?
?不,他不知道公司的任何情況。
?不,他僅僅可能是欺詐。
?不,他應(yīng)該不會(huì)。因?yàn)椤巴其N員”不在他朋友名單中,不管怎樣,他的英語(yǔ)講得并不好。
部分分?jǐn)?shù)參考答案
編碼1:回答“是”或“否”,僅提供“語(yǔ)匯訓(xùn)練”所提供的好處或不利,必須與準(zhǔn)確理解“語(yǔ)匯訓(xùn)練”的信息一致,可以明確或暗示“語(yǔ)匯訓(xùn)練”與“語(yǔ)言學(xué)習(xí)”的比較。
?是,他想學(xué)習(xí)西班牙語(yǔ)(明確作為語(yǔ)言學(xué)習(xí)工具“語(yǔ)匯訓(xùn)練”的好處)。
?是,這將幫助他學(xué)習(xí)詞匯(明確作為語(yǔ)言學(xué)習(xí)工具“語(yǔ)匯訓(xùn)練”的好處)。
?是,他將在英語(yǔ)和法語(yǔ)上獲取更多的自信和勇氣,因?yàn)樗麄兲峁┝诉@些語(yǔ)言(明確作為語(yǔ)言學(xué)習(xí)工具“語(yǔ)匯訓(xùn)練”的好處)。
?不,因?yàn)樗呀?jīng)通過(guò)能夠幫助他的網(wǎng)站提高了語(yǔ)言技巧(暗示“語(yǔ)匯訓(xùn)練”和“語(yǔ)言學(xué)習(xí)”的比較)。
?不,他將不會(huì)遇到新朋友(暗示“語(yǔ)匯訓(xùn)練”和“語(yǔ)言學(xué)習(xí)”的比較)。
零分參考答案
編碼0:給出不充分或模糊的回答。
?不,他應(yīng)該不會(huì)。
?是,這是個(gè)好主意。
表明沒(méi)有全面的理解材料,或者給出了不合理、不相關(guān)的回答。
?是,這樣他會(huì)和“推銷員”成為朋友。
編碼9:沒(méi)有任何作答。
從所給示例來(lái)看,這是一道相對(duì)復(fù)雜的題目,回答不但要答出“是”或“否”,還要給出能夠正確理解文本,并與文本信息相符的理由。盡管這是一道開(kāi)放式問(wèn)答題,但也要清楚開(kāi)放題也不是完全開(kāi)放,任意開(kāi)放,要結(jié)合文本信息,并對(duì)文本信息作出反思與評(píng)價(jià)。對(duì)這道題來(lái)說(shuō)也是一樣,從文本信息出發(fā),思考評(píng)價(jià)這則信息的可信度。首先應(yīng)該確定:進(jìn)入“語(yǔ)言學(xué)習(xí)”網(wǎng)站,是一種主動(dòng)行為,而不是通過(guò)某陌生人的引導(dǎo)在不了解任何情況下的被動(dòng)行為,陌生人在該網(wǎng)站上發(fā)布的信息可能是在做廣告,甚至是虛假?gòu)V告?;卮鸾嵌瓤梢詮男畔⒌陌l(fā)布者(“我的信息”中列出了在朋友表上的麥姬和不在朋友表上的推銷員)、信息本身的特點(diǎn)(消極方面:與“語(yǔ)言學(xué)習(xí)”相比,關(guān)于語(yǔ)言的學(xué)習(xí)以及公司的信息籠統(tǒng)而不具體,沒(méi)有提到學(xué)習(xí)費(fèi)用,或許是打著人們想學(xué)外語(yǔ)的幌子而使人上當(dāng)受騙,鏈接地址是否可靠等;積極方面:提供了自己想學(xué)的語(yǔ)種等)上思考。明確詳細(xì)的參考答案不但充分考慮了學(xué)生的答題情況,也給閱卷老師可靠的評(píng)分依據(jù),從而保證測(cè)試的公平性。
而我們的試題參考答案,大多是唯一的,即便對(duì)有些開(kāi)放性較強(qiáng)的題目,參考答案大多提供兩個(gè)示例,而這兩個(gè)示例相對(duì)于上萬(wàn)名考生可能會(huì)出現(xiàn)的答案,難免有些不夠充分,甚至有時(shí)我們會(huì)見(jiàn)到“意思接近即可”的答案,這種模糊性答案就給閱卷老師帶來(lái)了極大的開(kāi)放度,或許正是這種開(kāi)放度,卻在一定程度上降低了測(cè)試的公平性。
[1][2]OECD.PISA for Development-brochure[EB/OL].http://www. oecd.org/pisa/aboutpisa/pisa-for-development-brochure.pdf.
[3]馮善亮.為了應(yīng)用而閱讀——PISA閱讀素養(yǎng)測(cè)評(píng)框架介紹[J].廣東教育(綜合版),2014(10).
[4]專題二PISA2009閱讀素養(yǎng)測(cè)試公開(kāi)題選編.國(guó)家教育考試評(píng)價(jià)研 究 院 [EB/OL]. http://niea.neea.edu.cn/infor.jsp?infoid= 45732&class_id=40_05.
[5]夏雪梅.論P(yáng)ISA閱讀素養(yǎng)開(kāi)放題編制的技術(shù)[J].上海教育科研,2009(12).
[6]OECD.PISA 2015 Draft Frameworks[EB/OL].http://www.oecd.org/ pisa/pisaproducts/Draft%20PISA%202015%20Reading%20Frame?work%20.pdf.
[7]扈中平,主編.現(xiàn)代教育理論(第2版)[M].北京:高等教育出版社,2005:439.
[8]Digital Reading 2012.電子化閱讀.PISA機(jī)考公開(kāi)樣題.國(guó)家教育考試評(píng)價(jià)研究院[EB/OL].http://cbasq.acer.edu.au/index.php? cmd=toEra2012.
PISA Reading Analysis and Its Enlightenment to the Test Questions of Our Country
ZHANG Haixia
Reading literacy assessment is one of the main test of the Programme for International Student Assessment(PISA),and the Making of test questions is very important in the whole evaluation process.In this paper,the PISA reading literacy test questions are studied,and found that it has advantages in the design concept, selection of materials,evaluation level,and the preparation of the reference answers.These provide a lot of experience for the life of reading test questions in our country.
PISA;Reading Assessment;Making of Test Question
G405
A
1005-8427(2016)03-0052-6
本文系國(guó)家教育體制改革領(lǐng)導(dǎo)小組研究項(xiàng)目“研提OECD組織PISA測(cè)試項(xiàng)目經(jīng)驗(yàn)啟示”的研究成果之一。
張海俠,女,廣東省肇慶市教育局教研室(廣東肇慶 526020)