李 軍

(中國(guó)石油大學(xué)勝利學(xué)院 高等教育研究與評(píng)價(jià)中心,山東 東營(yíng) 257000)

伴隨著我國(guó)高等教育的應(yīng)用轉(zhuǎn)型和分類(lèi)發(fā)展,實(shí)踐教學(xué)作為培養(yǎng)高素質(zhì)應(yīng)用技術(shù)人才的重要環(huán)節(jié)和提升學(xué)校辦學(xué)水平的主要路徑已經(jīng)成為諸多應(yīng)用型高校實(shí)現(xiàn)可持續(xù)發(fā)展的共識(shí)。隨之而來(lái)的問(wèn)題是如何評(píng)價(jià)實(shí)踐教學(xué)的運(yùn)行質(zhì)量和實(shí)施成效,以及如何通過(guò)評(píng)價(jià)實(shí)現(xiàn)有效反饋并促進(jìn)實(shí)踐教學(xué)質(zhì)量提升。反觀既有的實(shí)踐教學(xué)質(zhì)量評(píng)價(jià),多數(shù)被視為一種鑒定的工具,以結(jié)果為導(dǎo)向并將評(píng)價(jià)結(jié)果作為高校評(píng)估排名的基本依據(jù)。同時(shí),相關(guān)理論研究缺乏、評(píng)價(jià)體系結(jié)構(gòu)復(fù)雜且忽視對(duì)實(shí)踐教學(xué)實(shí)施過(guò)程的評(píng)價(jià),從而淡化了教學(xué)評(píng)價(jià)對(duì)于改進(jìn)和提高教學(xué)工作質(zhì)量的價(jià)值及意義。實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的重新審視和體系構(gòu)建成為必然。

一、CIPP的教育評(píng)價(jià)模式

CIPP評(píng)價(jià)是美國(guó)學(xué)者斯塔弗爾比姆于20世紀(jì)60年代在批判泰勒評(píng)價(jià)模式的基礎(chǔ)上提出的一種基于“過(guò)程”和“決策改進(jìn)”的評(píng)價(jià)模式。20世紀(jì)40年代,泰勒經(jīng)過(guò)“八年研究”正式提出教育評(píng)價(jià)的概念,指出“評(píng)價(jià)過(guò)程實(shí)質(zhì)上是一個(gè)確定課程與教學(xué)計(jì)劃實(shí)際上達(dá)到教學(xué)目標(biāo)的程度的過(guò)程”[1]7,提出所謂目標(biāo)評(píng)價(jià)模式。泰勒評(píng)價(jià)模式以目標(biāo)為導(dǎo)向,以對(duì)測(cè)量結(jié)果的描述為特征,重在對(duì)教育活動(dòng)進(jìn)行總結(jié)性評(píng)價(jià),即主要考察教育活動(dòng)的結(jié)果是否達(dá)到預(yù)先設(shè)定的教育目標(biāo)。這種評(píng)價(jià)有利于對(duì)教育活動(dòng)的成效進(jìn)行歸納總結(jié),但不利于考察教育活動(dòng)的整體效能,從而無(wú)法根據(jù)評(píng)價(jià)結(jié)果,為決策者提出教育活動(dòng)改進(jìn)和完善的建議。為此,斯塔弗爾比姆指出,評(píng)價(jià)最重要的意圖不是為了證明,而是在于改進(jìn)[1]86;評(píng)價(jià)是一種核定、獲取和提供敘述性和判斷性信息的過(guò)程,這些信息涉及研究對(duì)象的目標(biāo)、設(shè)計(jì)、實(shí)施和影響的價(jià)值及優(yōu)缺點(diǎn),以便指導(dǎo)如何決策,滿(mǎn)足教學(xué)效能核定需要,并增加對(duì)研究對(duì)象的了解[2]。

學(xué)生的發(fā)展是教育活動(dòng)諸要素之間相互聯(lián)系、相互影響的結(jié)果,更是一個(gè)不斷變化和生成的過(guò)程?；诮逃顒?dòng)決策改進(jìn)的考量,斯塔弗爾比姆提出涵蓋背景評(píng)價(jià)(Context)、輸入評(píng)價(jià)(Input)、過(guò)程評(píng)價(jià)(Process)和成果評(píng)價(jià)(Product)的新的評(píng)價(jià)模式,簡(jiǎn)稱(chēng)CIPP教育評(píng)價(jià)。背景評(píng)價(jià)即目標(biāo)評(píng)價(jià),是通過(guò)分析教育活動(dòng)實(shí)施方案的背景,判斷活動(dòng)目標(biāo)設(shè)定的合理性;輸入評(píng)價(jià)是考察實(shí)現(xiàn)活動(dòng)目標(biāo)所需要的條件和資源,意在評(píng)判活動(dòng)方案的可行性和效用性;過(guò)程評(píng)價(jià)是對(duì)活動(dòng)實(shí)施過(guò)程開(kāi)展的評(píng)價(jià),即審視活動(dòng)過(guò)程的運(yùn)行情況和運(yùn)行質(zhì)量;效果評(píng)價(jià)則是要判斷教育活動(dòng)的實(shí)施效果。后期研究中,斯塔弗爾比姆又將成果評(píng)價(jià)分解為影響、成效、可持續(xù)性和推廣性4個(gè)階段,進(jìn)一步拓展評(píng)價(jià)結(jié)果對(duì)于反饋和改進(jìn)教育活動(dòng)的作用。顯然,CIPP評(píng)價(jià)將教育活動(dòng)全過(guò)程納入評(píng)價(jià)范圍,系統(tǒng)考察教育活動(dòng)的目標(biāo)、設(shè)計(jì)、過(guò)程和效果,評(píng)價(jià)每一個(gè)環(huán)節(jié)是否滿(mǎn)足需要,從而實(shí)現(xiàn)了對(duì)教育活動(dòng)全過(guò)程實(shí)施情況的監(jiān)控、診斷和反饋,使之具備了動(dòng)態(tài)評(píng)價(jià)的基本特征,能夠更好地為決策提供信息,便于被管理者采用,以提出下一步的改進(jìn)策略。在這個(gè)意義上,CIPP評(píng)價(jià)有利于應(yīng)用型高校整體推動(dòng)實(shí)踐教學(xué)改革,亦成為應(yīng)用型高校構(gòu)建實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系的理論依據(jù)和實(shí)證基礎(chǔ)。

二、以CIPP評(píng)價(jià)理論重構(gòu)實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系

根據(jù)CIPP評(píng)價(jià)理論,按照教育活動(dòng)的整體性和系統(tǒng)性原則,構(gòu)建涵蓋目標(biāo)評(píng)價(jià)、方案評(píng)價(jià)、過(guò)程評(píng)價(jià)和效果評(píng)價(jià)4項(xiàng)指標(biāo)的應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系,分層次設(shè)置各級(jí)評(píng)價(jià)指標(biāo)的內(nèi)容和權(quán)重。

(一)實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系的基本內(nèi)涵

實(shí)踐教學(xué)的目標(biāo)評(píng)價(jià),是對(duì)實(shí)踐教學(xué)目標(biāo)的合理性進(jìn)行的診斷性評(píng)價(jià),目的是明確實(shí)踐教學(xué)需要做什么。實(shí)踐教學(xué)目標(biāo)是實(shí)踐教學(xué)活動(dòng)的出發(fā)點(diǎn)和歸宿,旨在確定教學(xué)目標(biāo)和教育對(duì)象的需求。對(duì)應(yīng)應(yīng)用型高校的辦學(xué)特點(diǎn),觀測(cè)點(diǎn)主要包括:實(shí)踐教學(xué)目標(biāo)與理論教學(xué)目標(biāo)的對(duì)應(yīng)程度,體現(xiàn)學(xué)科專(zhuān)業(yè)特點(diǎn)的程度,與行業(yè)企業(yè)需求的契合程度,學(xué)生對(duì)實(shí)踐教學(xué)目標(biāo)的理解、認(rèn)同程度及參與實(shí)踐教學(xué)的準(zhǔn)備程度等。

實(shí)踐教學(xué)的方案評(píng)價(jià),是在目標(biāo)評(píng)價(jià)基礎(chǔ)上,對(duì)達(dá)到目標(biāo)所需要的且能夠保證的實(shí)踐條件、資源以及實(shí)踐教學(xué)方案的相對(duì)優(yōu)點(diǎn)所作的評(píng)價(jià),其實(shí)質(zhì)是對(duì)方案的可行性和效用性進(jìn)行判斷[3],屬于診斷性評(píng)價(jià)。實(shí)踐資源與條件是實(shí)踐教學(xué)方案制定和實(shí)施的基礎(chǔ)與關(guān)鍵要素。其主要觀測(cè)點(diǎn)包括:收集實(shí)踐教學(xué)的經(jīng)費(fèi)、場(chǎng)所、設(shè)備、課程、項(xiàng)目、教材等資源及條件的信息,評(píng)估既有的實(shí)踐資源和實(shí)踐條件能否達(dá)成實(shí)踐教學(xué)目標(biāo),確定方案實(shí)施所需的外部資源。

實(shí)踐教學(xué)的過(guò)程評(píng)價(jià),是對(duì)方案實(shí)施情況的監(jiān)督檢查,目的在于調(diào)整和改進(jìn)實(shí)施過(guò)程,也即方案實(shí)施過(guò)程中的形成性評(píng)價(jià)[4]。顯然,過(guò)程評(píng)價(jià)是要了解執(zhí)行過(guò)程中存在的問(wèn)題和困難,為反饋和實(shí)施新的教育決策服務(wù)。過(guò)程評(píng)價(jià)的主要觀測(cè)點(diǎn)有:實(shí)踐課程的時(shí)間安排、運(yùn)行程序、組織形式、實(shí)踐場(chǎng)所和儀器設(shè)備利用率以及教師的實(shí)踐指導(dǎo)情況等。

實(shí)踐教學(xué)的效果評(píng)價(jià),是對(duì)實(shí)踐教學(xué)方案的執(zhí)行結(jié)果與學(xué)生的實(shí)踐成效進(jìn)行的測(cè)量與評(píng)價(jià)。目的是全面整體地檢測(cè)實(shí)踐教學(xué)質(zhì)量,考核判斷實(shí)踐教學(xué)實(shí)施的最終成果,從而提供反饋改進(jìn)意見(jiàn),為實(shí)踐教學(xué)新方案設(shè)計(jì)提供決策依據(jù)。效果評(píng)價(jià)屬于終結(jié)性評(píng)價(jià),關(guān)注的主要問(wèn)題是實(shí)踐教學(xué)目標(biāo)的達(dá)成程度,要能判斷出哪些實(shí)踐目標(biāo)已經(jīng)達(dá)成,哪些實(shí)踐目標(biāo)尚未達(dá)成。如果實(shí)踐目標(biāo)未達(dá)成,甚至出現(xiàn)了“負(fù)效應(yīng)”(即非預(yù)期效果),要能診斷出是實(shí)踐教學(xué)目標(biāo)本身的問(wèn)題,還是方案設(shè)計(jì)或者實(shí)施過(guò)程中的問(wèn)題。其主要觀測(cè)點(diǎn)包括:實(shí)踐教學(xué)目標(biāo)的達(dá)成程度、實(shí)踐單位的考核評(píng)價(jià)以及學(xué)生自身的實(shí)踐成果等。

如此,實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)涵蓋了實(shí)踐教學(xué)的目標(biāo)、方案、過(guò)程及效果,從而搭建起實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的閉合循環(huán)。在實(shí)踐活動(dòng)動(dòng)態(tài)運(yùn)行的環(huán)境中,進(jìn)行即時(shí)性的組織、控制、評(píng)價(jià)和反饋,確保實(shí)踐教學(xué)過(guò)程、實(shí)際績(jī)效與實(shí)踐教學(xué)目標(biāo)相一致,并達(dá)到改進(jìn)完善以最大可能地提升學(xué)生應(yīng)用實(shí)踐能力的目的。

(二)實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系的構(gòu)建

以四項(xiàng)評(píng)價(jià)構(gòu)建實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系,最終要落實(shí)到評(píng)價(jià)指標(biāo)和權(quán)重的篩選及確認(rèn)。按照CIPP理論,以四項(xiàng)評(píng)價(jià)作為一級(jí)指標(biāo),通過(guò)文獻(xiàn)研究法對(duì)實(shí)踐教學(xué)全過(guò)程質(zhì)量評(píng)價(jià)的相關(guān)問(wèn)題進(jìn)行梳理,以定性的方式初步遴選20個(gè)二級(jí)指標(biāo)。

區(qū)分學(xué)生、教師、專(zhuān)家三類(lèi)群體,以其不同的視角設(shè)計(jì)三種不同的方式對(duì)所涉指標(biāo)進(jìn)行調(diào)研。一是將初步確定的實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)內(nèi)容編制在線問(wèn)卷,面向在校學(xué)生征詢(xún)意見(jiàn),以關(guān)鍵特征調(diào)查法將學(xué)生重點(diǎn)關(guān)注的問(wèn)題補(bǔ)充歸類(lèi);二是依據(jù)學(xué)生調(diào)研后優(yōu)化調(diào)整的指標(biāo)內(nèi)容,選取不同學(xué)科專(zhuān)業(yè)背景的理論教師、實(shí)踐指導(dǎo)教師和教育管理人員進(jìn)行座談,進(jìn)一步總結(jié)凝練出25個(gè)二級(jí)指標(biāo);三是邀請(qǐng)學(xué)科專(zhuān)家和行業(yè)專(zhuān)家,使用專(zhuān)家咨詢(xún)法(特爾菲法)對(duì)前兩次調(diào)研的結(jié)果及其指標(biāo)進(jìn)行多次論證和評(píng)價(jià),以指數(shù)法區(qū)分各級(jí)指標(biāo)的重要程度,綜合厘定各級(jí)指標(biāo)的相對(duì)權(quán)重。最終建構(gòu)實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系,包括4個(gè)一級(jí)指標(biāo)、24個(gè)二級(jí)指標(biāo)(見(jiàn)表1)。

教學(xué)以學(xué)生發(fā)展為中心,學(xué)生是實(shí)踐教學(xué)的主體,學(xué)生對(duì)專(zhuān)業(yè)實(shí)踐教學(xué)目標(biāo)的認(rèn)知程度、對(duì)專(zhuān)業(yè)實(shí)踐教學(xué)開(kāi)展情況的滿(mǎn)意度以及通過(guò)實(shí)踐教學(xué)取得的學(xué)習(xí)成效是高校評(píng)價(jià)實(shí)踐教學(xué)質(zhì)量所應(yīng)關(guān)注的核心問(wèn)題。以CIPP理念構(gòu)建的應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系將以學(xué)生作為評(píng)價(jià)主體,即從學(xué)生視角全方位審視、研判、評(píng)價(jià)應(yīng)用型高校實(shí)踐教學(xué)全過(guò)程運(yùn)行情況,使決策者或管理者能夠清晰地認(rèn)識(shí)到所實(shí)施的實(shí)踐教學(xué)在培養(yǎng)學(xué)生方面的優(yōu)勢(shì)和不足,并有針對(duì)性地不斷改進(jìn)實(shí)踐教學(xué)的方案設(shè)計(jì)和運(yùn)行程序,以提升實(shí)踐教學(xué)質(zhì)量。

表1 基于CIPP模式的應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系

三、實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系的實(shí)證分析

根據(jù)實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)指標(biāo)體系編制無(wú)記名開(kāi)放式在線問(wèn)卷,共設(shè)計(jì)24道題目,面向應(yīng)用型高校在校本科生施測(cè),以期通過(guò)分析問(wèn)卷的可信性、可靠性和鑒別能力,判斷該指標(biāo)體系能否達(dá)成評(píng)價(jià)實(shí)踐教學(xué)質(zhì)量的目的。

(一)研究方法

1.被試

被試為某應(yīng)用型高校在校本科生,年齡為18～25歲,年級(jí)為大一到大四,分布于工學(xué)、理學(xué)、醫(yī)學(xué)、法學(xué)、教育學(xué)、管理學(xué)、文學(xué)、藝術(shù)學(xué)等8個(gè)學(xué)科門(mén)類(lèi)的28個(gè)本科專(zhuān)業(yè)。測(cè)試共發(fā)放1 402份問(wèn)卷,回收有效問(wèn)卷1 271份。

2.數(shù)據(jù)處理

使用數(shù)據(jù)統(tǒng)計(jì)分析SaaS軟件(SPSSAU)對(duì)收集到的數(shù)據(jù)進(jìn)行統(tǒng)計(jì)分析。

(二)數(shù)據(jù)分析

1.問(wèn)卷的信度分析

檢驗(yàn)樣本回答結(jié)果是否可靠,即數(shù)據(jù)是否真實(shí),樣本是否認(rèn)真回答,回答是否可信等。信度表現(xiàn)的是測(cè)驗(yàn)結(jié)果的一貫性、一致性和穩(wěn)定性。對(duì)于一份問(wèn)卷而言,如果兩個(gè)題項(xiàng)都測(cè)的是被測(cè)者的同一個(gè)特征,那么被試在這兩個(gè)題項(xiàng)上的得分應(yīng)當(dāng)有一致性,即一個(gè)得分高,另一個(gè)得分也應(yīng)該高;兩個(gè)題項(xiàng)的信度系數(shù)越高,表明得分越一致,就越肯定兩個(gè)題項(xiàng)確實(shí)測(cè)的是同一個(gè)特征。對(duì)該問(wèn)卷進(jìn)行信度分析,得出的數(shù)據(jù)結(jié)果見(jiàn)表2、表3。

表2 信度分析數(shù)據(jù)

表3 折半信度分析

2.問(wèn)卷的效度分析

檢驗(yàn)該問(wèn)卷題項(xiàng)設(shè)計(jì)是否合理,分析問(wèn)卷的各個(gè)題項(xiàng)準(zhǔn)確評(píng)價(jià)實(shí)踐教學(xué)質(zhì)量的程度。效度越高,說(shuō)明問(wèn)卷的測(cè)量結(jié)果與要評(píng)價(jià)的內(nèi)容越吻合,反之,效度越低,則說(shuō)明問(wèn)卷無(wú)法準(zhǔn)確評(píng)價(jià)實(shí)踐教學(xué)的質(zhì)量。對(duì)該問(wèn)卷進(jìn)行效度分析,得到的分析結(jié)果見(jiàn)表4。

表4 效度分析數(shù)據(jù)

3.區(qū)分度分析

測(cè)量問(wèn)卷項(xiàng)目的有效和合適性。就是要測(cè)量所有題項(xiàng)對(duì)于受測(cè)者評(píng)價(jià)能力、教育成就的區(qū)分程度和鑒別能力;區(qū)分度高的題項(xiàng),能將不同水平的受測(cè)者區(qū)分開(kāi)來(lái),區(qū)分度低的項(xiàng)目,就沒(méi)有很好的鑒別能力。因此,區(qū)分度也被稱(chēng)為題項(xiàng)的效度,是評(píng)價(jià)題項(xiàng)質(zhì)量、篩選題項(xiàng)的重要依據(jù)。對(duì)該問(wèn)卷進(jìn)行區(qū)分度分析,得到的數(shù)據(jù)結(jié)果見(jiàn)表5。

4.驗(yàn)證性因子分析

用于測(cè)量因子與測(cè)量項(xiàng)(量表題項(xiàng))之間的對(duì)應(yīng)關(guān)系是否與研究者預(yù)測(cè)保持一致的一種研究方法。本研究主要使用驗(yàn)證性因子分析判斷問(wèn)卷的聚合效度和目標(biāo)評(píng)價(jià)、方案評(píng)價(jià)、過(guò)程評(píng)價(jià)及結(jié)果評(píng)價(jià)4個(gè)因子間的相關(guān)程度,數(shù)據(jù)結(jié)果見(jiàn)表6～8。

(三)數(shù)據(jù)分析的結(jié)果

信度分析結(jié)果。信度分析用于研究定量數(shù)據(jù)回答的可靠性和準(zhǔn)確性。從表2可知:信度系數(shù)值為0.971,大于0.9,說(shuō)明研究數(shù)據(jù)的信度質(zhì)量很高。針對(duì)“項(xiàng)已刪除的α系數(shù)”,分析項(xiàng)被刪除后的信度系數(shù)值沒(méi)有明顯提升,說(shuō)明24個(gè)題項(xiàng)均應(yīng)保留,進(jìn)一步說(shuō)明研究數(shù)據(jù)的信度水平高。分析項(xiàng)對(duì)應(yīng)的“CITC值”全部高于0.5,說(shuō)明分析項(xiàng)之間具有良好的相關(guān)關(guān)系。表3中的折半信度系數(shù)值為0.927,大于0.9,也說(shuō)明研究數(shù)據(jù)的信度質(zhì)量很高,可用于進(jìn)一步分析。

效度分析結(jié)果。通過(guò)KMO值、共同度、方差解釋率等指標(biāo)進(jìn)行綜合分析,以驗(yàn)證數(shù)據(jù)的效度水平情況。KMO值用于判斷是否有效度,共同度值用于排除不合理研究題項(xiàng),方差解釋率值用于說(shuō)明信息提取水平等。從表4可知,所有研究題項(xiàng)對(duì)應(yīng)的共同度值均>0.4,說(shuō)明研究項(xiàng)信息可以被有效提取。KMO值為0.973>0.6,意味著研究數(shù)據(jù)具有很高的效度。4個(gè)因子的方差解釋率分別是22.805%,20.656%,16.493%,14.589%,旋轉(zhuǎn)后累積方差解釋率為74.542%>50%,說(shuō)明研究題項(xiàng)的信息量可以有效提取出來(lái)。

表5 區(qū)分度分析數(shù)據(jù)

**p<0.01

表6 模型AVE和CR指標(biāo)結(jié)果

區(qū)分度分析結(jié)果。區(qū)分度分析目的在于確定問(wèn)卷研究項(xiàng)目是否有效和合適。其原理是先對(duì)分析項(xiàng)求和,進(jìn)而將其分成高分和低分組(以27%和73%分位數(shù)為界),然后使用T檢驗(yàn)去對(duì)比高分和低分組別的差異情況,如有差異則說(shuō)明量表項(xiàng)設(shè)計(jì)合適,反之則說(shuō)明量表項(xiàng)無(wú)法區(qū)分出信息,設(shè)計(jì)不合理應(yīng)作刪除處理。從表5可知,24個(gè)題項(xiàng)全部呈現(xiàn)出顯著性差異(p<0.01),意味著總共24個(gè)題項(xiàng)均具有良好的區(qū)分性,不需要?jiǎng)h除任何題項(xiàng)。

驗(yàn)證性因子分析。從表6可知,問(wèn)卷的4個(gè)因子分別對(duì)應(yīng)的AVE值均>0.5,組合信度CR值均明顯>0.7;同時(shí)表7中的因子載荷系數(shù)顯示,4個(gè)因子共對(duì)應(yīng)著24個(gè)題項(xiàng),每個(gè)題項(xiàng)均呈現(xiàn)出0.001水平的顯著性(p< 0.001),僅一個(gè)題項(xiàng)(A1)的標(biāo)準(zhǔn)化載荷系數(shù)略小于0.7,結(jié)合實(shí)踐教學(xué)認(rèn)知目標(biāo)的必要性,該題項(xiàng)保留;其余題項(xiàng)的載荷系數(shù)值均接近或者高于0.8,綜合說(shuō)明問(wèn)卷數(shù)據(jù)具有優(yōu)秀的聚合效度。

綜上所述,該評(píng)價(jià)問(wèn)卷具有良好的信度、效度和區(qū)分度,評(píng)價(jià)指標(biāo)體系的4個(gè)因子之間具有極高的相關(guān)程度,可以使用該問(wèn)卷評(píng)價(jià)應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量。

表7 因子載荷系數(shù)表

表8 因子協(xié)方差表

四、應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系的實(shí)踐應(yīng)用

使用樣本數(shù)據(jù),綜合評(píng)價(jià)應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量和成效。數(shù)據(jù)分析方法采用模糊綜合評(píng)價(jià)法,根據(jù)模糊數(shù)學(xué)的最大隸屬原則把學(xué)生的定性評(píng)價(jià)轉(zhuǎn)化為定量評(píng)價(jià),以其清晰的結(jié)果解決主觀評(píng)價(jià)模糊、難以量化的問(wèn)題,為多因素、多層次影響的應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量做出一個(gè)總體評(píng)價(jià)。

(一)評(píng)價(jià)指標(biāo)的評(píng)價(jià)因素集、評(píng)語(yǔ)集和權(quán)重集

根據(jù)表1,評(píng)價(jià)因素集為:A={A1,A2,A3,A4,A5,A6},B={B1,B2,B3,B4,B5,B6,B7,B8},C={C1,C2,C3,C4,C5,C6},D={D1,D2,D3,D4}。

評(píng)語(yǔ)集設(shè)計(jì)為四個(gè)等級(jí)V={V1,V2,V3,V4}={優(yōu),良,中,差}。

各級(jí)指標(biāo)權(quán)重向量為:

W=(0.150 0, 0.250 0, 0.300 0, 0.300 0)T;

W1=(0.133 3, 0.133 3, 0.200 0, 0.133 3, 0.200 0, 0.200 0)T;

W2=(0.120 0, 0.120 0, 0.120 0, 0.080 0, 0.160 0, 0.160 0, 0.120 0, 0.120 0)T;

W3=(0.166 7, 0.133 3, 0.133 3, 0.166 7, 0.200 0, 0.200 0)T;

W4=(0.266 7, 0.266 7, 0.233 3, 0.233 3)T。

(二)構(gòu)造隸屬度矩陣

隸屬度矩陣為Ri={ri1,ri2,…,rim},指的是所評(píng)價(jià)的因素的第i個(gè)指標(biāo)所對(duì)應(yīng)的評(píng)語(yǔ)集中的每個(gè)V1,V2,…,Vm的隸屬度。rij=Nij/N,其中N為參與應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的總?cè)藬?shù),Nij為參與評(píng)價(jià)的總?cè)藬?shù)當(dāng)中,對(duì)其中的第i個(gè)指標(biāo)進(jìn)行評(píng)價(jià)時(shí),選擇評(píng)語(yǔ)為Vj(j=1,2,…,m)的人數(shù)。學(xué)生評(píng)價(jià)結(jié)果見(jiàn)表9。

表9 1 271名學(xué)生對(duì)應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的結(jié)果

由此可以構(gòu)建:

(1)實(shí)踐教學(xué)目標(biāo)評(píng)價(jià)的隸屬度矩陣

(2)實(shí)踐教學(xué)方案評(píng)價(jià)的隸屬度矩陣

(3)實(shí)踐教學(xué)過(guò)程評(píng)價(jià)的隸屬度矩陣

(4)實(shí)踐教學(xué)效果評(píng)價(jià)的隸屬度矩陣

(三)單因素一級(jí)模糊評(píng)價(jià)

根據(jù)公式Ki=Wi*Ri=(wi1,wi1,…,wi1)(ri1,ri2,…,rim)T,運(yùn)用隸屬度矩陣Ri與前面求得的權(quán)重集Wi進(jìn)行模糊矩陣的復(fù)合運(yùn)算,可得到用隸屬度表示的單因素一級(jí)模糊評(píng)判結(jié)果,進(jìn)而得到應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的一級(jí)模糊評(píng)價(jià)矩陣為:

(四)綜合評(píng)估(二級(jí)模糊綜合評(píng)判)

運(yùn)用K與前面求得的權(quán)重集W進(jìn)行模糊矩陣的復(fù)合運(yùn)算,可以得到用隸屬度表示的應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的最后評(píng)價(jià)(二級(jí)模糊綜合評(píng)判)結(jié)果為P=W*K=[0.314 9 0.451 0 0.202 6 0.031 4]。

結(jié)果顯示,有31.49%的可能屬于“優(yōu)”,有45.10%的可能屬于“良”,有20.26%的可能屬于“中”,有3.14%的可能屬于“差”。根據(jù)最大隸屬原則,該高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)的綜合評(píng)判結(jié)果為“良”。

實(shí)踐證明,以CIPP的評(píng)價(jià)理論構(gòu)建應(yīng)用型高校實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)體系,能切實(shí)尊重學(xué)生的主體地位,有效落實(shí)以學(xué)生發(fā)展為中心的教學(xué)理念,使實(shí)踐教學(xué)質(zhì)量評(píng)價(jià)能更接近學(xué)生的學(xué)習(xí)感知和實(shí)踐體悟,能更真實(shí)地反映實(shí)踐教學(xué)的實(shí)際運(yùn)行情況。這種評(píng)價(jià)體系既可以評(píng)價(jià)高校實(shí)踐教學(xué)整體運(yùn)行質(zhì)量,亦可以科學(xué)診斷不同專(zhuān)業(yè)類(lèi)型的實(shí)踐教學(xué)存在的問(wèn)題,從而更好地監(jiān)控和保障實(shí)踐教學(xué)效果,為改進(jìn)實(shí)踐教學(xué)、提升人才培養(yǎng)質(zhì)量提供依據(jù)。