楊德武 杜 娟 邱 準(zhǔn) 武 力

基于客觀結(jié)構(gòu)化臨床考試的醫(yī)學(xué)影像技術(shù)職業(yè)能力評價體系研究*

楊德武①杜 娟②邱 準(zhǔn)③武 力③

目的：設(shè)計醫(yī)學(xué)影像技術(shù)專業(yè)職業(yè)能力評價的客觀結(jié)構(gòu)化臨床考試(OSCE)體系，探討OSCE體系在進(jìn)行專業(yè)知識和職業(yè)能力評估中的應(yīng)用價值。方法：采取訪談的形式對北京市醫(yī)院放射科專家進(jìn)行調(diào)研，設(shè)計OSCE考核體系；對醫(yī)學(xué)影像技術(shù)專業(yè)2015級36名學(xué)生開展標(biāo)準(zhǔn)化測試與OSCE考核，并對考核成績的難度、區(qū)分度、重測信度和效標(biāo)效度進(jìn)行統(tǒng)計分析。結(jié)果：OSCE考核體系的考站難度系數(shù)均為0.6～0.8，區(qū)分度平均值為0.557，重測信度分析結(jié)果r=0.953，P＜0.01，效標(biāo)效度分析結(jié)果r=0.978，P＜0.01。結(jié)論：基于OSCE的醫(yī)學(xué)影像技術(shù)職業(yè)能力評價體系能夠科學(xué)有效地進(jìn)行專業(yè)能力評估，并可指導(dǎo)教學(xué)活動的開展，提高人才培養(yǎng)質(zhì)量。

考站；標(biāo)準(zhǔn)化患者；信度；效度；評價體系

隨著臨床醫(yī)學(xué)和影像設(shè)備的不斷發(fā)展，影像檢查、診斷與治療技術(shù)在醫(yī)療衛(wèi)生行業(yè)中發(fā)揮著越來越重要的作用，同時對醫(yī)院放射技術(shù)人員提出了新的要求。在高等院校中，評價醫(yī)學(xué)影像技術(shù)專業(yè)學(xué)生是否具備相應(yīng)的臨床能力，是人才培養(yǎng)質(zhì)量評估的一項重要內(nèi)容。傳統(tǒng)的評價方法多以理論考試為主，職業(yè)能力考核方式多局限在單一的工作內(nèi)容上，缺乏對職業(yè)能力培養(yǎng)效果的系統(tǒng)性評定。為此，本研究在客觀結(jié)構(gòu)化臨床考試(objective structured clinical examination，OSCE)模式基礎(chǔ)上，設(shè)計醫(yī)學(xué)影像技術(shù)職業(yè)能力考站和標(biāo)準(zhǔn)化患者(圖像)，在理論知識、專業(yè)技能和職業(yè)素質(zhì)3個維度開展學(xué)生能力評價，探討OSCE評價體系的應(yīng)用價值[1-2]。

1 資料與方法

1.1 基本資料

選取北京衛(wèi)生職業(yè)學(xué)院醫(yī)學(xué)影像技術(shù)專業(yè)2015級三年制高職班36名二年級學(xué)生，其中女生16名，男生20名，已完成兩年在校所有專業(yè)課程的學(xué)習(xí)，在即將進(jìn)入醫(yī)院實習(xí)前進(jìn)行專業(yè)知識和職業(yè)能力考核?？己朔謩e于2017年5月進(jìn)行標(biāo)準(zhǔn)化測試，2017年6月進(jìn)行OSCE考核；根據(jù)測試結(jié)果將36名考生的成績排序，并將其按照排序奇數(shù)和偶數(shù)分為A組和B組，每組18名，對兩組標(biāo)準(zhǔn)化測試成績和OSCE考核成績進(jìn)行對比分析。

1.2 OSCE考站設(shè)置

為確保OSCE考站內(nèi)容與職業(yè)崗位工作的一致性，在對北京市醫(yī)院放射科50余位技術(shù)專家進(jìn)行調(diào)研訪談的基礎(chǔ)上，制定不同影像設(shè)備和工作崗位職業(yè)能力的標(biāo)準(zhǔn)[3-4]。結(jié)合OSCE考核模式的特點及組織實施需要，對選定的影像技術(shù)專業(yè)核心技能要素進(jìn)行整理，共設(shè)計9個考站，其中包括16項能力考核，即放射科登記考站、DR影像采集考站、CT影像采集考站、MRI影像采集考站、超聲影像采集考站、影像質(zhì)量評價考站、影像處理考站、影像診斷考站和影像打印考站，見表1。

1.3 考核內(nèi)容編寫

由醫(yī)院放射科專家、專業(yè)教師、實驗教師和教務(wù)管理人員共同組成課題小組開展研討交流，設(shè)計完成OSCE考站的考核內(nèi)容中臨床案例、工作場景、技能操作流程、理論知識考題、職業(yè)素質(zhì)要求、評分標(biāo)準(zhǔn)、設(shè)備配置及考場安排等內(nèi)容?？颊镜臉?biāo)準(zhǔn)化患者(圖像)均選取自北京市三甲醫(yī)院放射科的真實病例，為保障臨床案例的可操作性和典型性，對20例標(biāo)準(zhǔn)化患者的臨床病歷進(jìn)一步整理充實，并且對20套標(biāo)準(zhǔn)化圖像設(shè)計處理優(yōu)化方案。OSCE考站配置包括登記工作站、DR檢查室、CT檢查室、MRI檢查室、超聲檢查室、PACS工作站、打印工作站、錄播系統(tǒng)和思維訓(xùn)練系統(tǒng)，根據(jù)考站的內(nèi)容和形式分別設(shè)計技能操作項目和理論考試題庫，通過錄播系統(tǒng)實時采集考生的操作以及思維訓(xùn)練系統(tǒng)進(jìn)行在線測試，并參照制定的考站評分系統(tǒng)進(jìn)行系統(tǒng)評價、教師評價和標(biāo)準(zhǔn)化患者評價。

1.4 標(biāo)準(zhǔn)化患者及圖像處理培訓(xùn)

依據(jù)OSCE考核內(nèi)容及實施要求，考站1～5標(biāo)準(zhǔn)化患者培訓(xùn)的主要對象是教師和學(xué)生兩類人群，主要涉及患者信息描述、臨床病癥演示及醫(yī)患溝通等內(nèi)容，經(jīng)過理論學(xué)習(xí)、集中培訓(xùn)、病癥演示和考核評分等流程，選取2位教師和18位學(xué)生作為OSCE考站的標(biāo)準(zhǔn)化患者。同時對考站6～9的標(biāo)準(zhǔn)化圖像進(jìn)行處理，針對不同考核內(nèi)容設(shè)置圖像窗寬窗位值、增減序列圖像、核對容積數(shù)據(jù)量、添加病史信息、關(guān)聯(lián)患者及標(biāo)注信息等，處理后的圖像經(jīng)課題小組審核后分類導(dǎo)入影像歸檔及傳輸系統(tǒng)(picture archiving and communication systems，PACS)并標(biāo)記注明。標(biāo)準(zhǔn)化患者培訓(xùn)和標(biāo)準(zhǔn)圖像處理嚴(yán)格按照臨床崗位標(biāo)準(zhǔn)的要求進(jìn)行設(shè)計，以此保障OSCE考站運(yùn)行的科學(xué)性和規(guī)范性[3-4]。

1.5 標(biāo)準(zhǔn)化測試與OSCE考核

(1)兩組標(biāo)準(zhǔn)化測試。在測試內(nèi)容選取上嚴(yán)格按照全國衛(wèi)生專業(yè)技術(shù)資格放射醫(yī)學(xué)技術(shù)考試大綱要求，課題組專家節(jié)選歷年考試真題及試題庫中的技能操作部分編寫標(biāo)準(zhǔn)化試卷，根據(jù)測試結(jié)果將36名考生的成績排序，奇數(shù)位18位同學(xué)設(shè)定為A組，偶數(shù)位18位同學(xué)設(shè)定為B組。

(2)兩組OSCE考核。在實驗樓醫(yī)學(xué)影像實訓(xùn)中心進(jìn)行OSCE考核，各站根據(jù)考核需要配置設(shè)備及考核系統(tǒng)：在PACS中主要進(jìn)行登記、影像質(zhì)量評價、影像處理及影像診斷等操作內(nèi)容考核；醫(yī)學(xué)影像設(shè)備進(jìn)行檢查技術(shù)操作內(nèi)容考核；打印機(jī)完成檢查結(jié)果的打印操作內(nèi)容考核；錄播系統(tǒng)進(jìn)行操作過程的錄制、保存及查閱；思維訓(xùn)練系統(tǒng)進(jìn)行各站理論內(nèi)容的考核及評閱[5]。OSCE考核對A組和B組依次開展考核，考站隨機(jī)選定1名教師和行業(yè)專家組成考站評分者，9名志愿者分別完成考站的組織及引導(dǎo)工作，課題負(fù)責(zé)人根據(jù)考站的分值權(quán)重進(jìn)行成績匯總和分析[6]。

表1 醫(yī)學(xué)影像技術(shù)專業(yè)OSCE考站設(shè)置

1.6 統(tǒng)計學(xué)方法

考生成績分標(biāo)準(zhǔn)化測試成績和OSCE考核成績兩部分，應(yīng)用SPSS19.0統(tǒng)計軟件對A組和B組進(jìn)行對比統(tǒng)計分析，即OSCE考核結(jié)果的難度、區(qū)分度、信度和效度指標(biāo)的分析，用于評估OSCE考核體系對學(xué)生放射檢查技術(shù)能力評價的實用性和科學(xué)性。以P＜0.01為差異有統(tǒng)計學(xué)意義。

2 結(jié)果

2.1 OSCE考核成績分析

(1)OSCE考核的兩組考生平均成績?yōu)?3.22，最低分48，最高分93，正態(tài)分布檢驗結(jié)果顯示，偏度系數(shù)Skewness=-0.252，峰度系數(shù)Kurtosis=0.078，兩個系數(shù)均＜1，可認(rèn)為近似于正態(tài)分布，如圖1所示。

圖1 OSCE成績分布示圖

(2)試題難度采用難度系數(shù)(P)表示。難度系數(shù)與試題實際難易程度正好相反，難度系數(shù)P值越大表明試題越容易。多數(shù)試題P值應(yīng)分布在0.3～0.7之間，選拔性考試為0.5左右為宜，通常在?？荚嚍槟繕?biāo)參照性考試，可適當(dāng)偏高，平均難度以0.7左右為宜。本次各考站難度系數(shù)均為0.6～0.8，在教育評估和測量領(lǐng)域?qū)儆跇?biāo)準(zhǔn)考試參照范圍，因此，本次考試的難度是適宜的。區(qū)分度(D)指試題對被試者情況的分辨能力的大小，區(qū)分度D值應(yīng)在為-1～+1之間，D值＞0.4表明區(qū)分度很好。OSCE考核體系區(qū)分度指標(biāo)D值基本＞0.4，表明對考生的臨床技能評定具有較好的區(qū)分能力；各考站的成績統(tǒng)計結(jié)果見表2。

2.2 OSCE信度分析

為檢測OSCE考核體系的一致性和穩(wěn)定性，通過采用Pearson法對A組和B組考試成績進(jìn)行相關(guān)性分析，其重測信度經(jīng)統(tǒng)計分析，相關(guān)系數(shù)r=0.953，P＜0.01，表明這兩次測驗的重測信度很高。同時，對各考站的評分者進(jìn)行了信度分析，如果為兩個評分者，則采用積差相關(guān)分析，認(rèn)為結(jié)果訓(xùn)練的成對評分者之間的一致性達(dá)到0.90以上，評分為客觀。在評分者進(jìn)行獨立評分的基礎(chǔ)上，各考站評分者信度均在0.92～0.97之間，評分者之間的一致性較高。

2.3 OSCE效度分析

在OSCE考核體系的效度分析方面，首先計算考試的效標(biāo)效度，即考試結(jié)果與效標(biāo)之間的一致程度[7]。使用學(xué)生標(biāo)準(zhǔn)化考試成績作為效標(biāo)，利用Pearson法，即積差相關(guān)法求效標(biāo)效度，相關(guān)系數(shù)r=0.978，P＜0.01，為高度相關(guān)，表明OSCE考核的有效性。為進(jìn)一步論證系統(tǒng)的有效性，組織20余位北京市各級各類醫(yī)院放射科專家進(jìn)行論證分析，通過OSCE系統(tǒng)討論、考核數(shù)據(jù)檢測及考生抽樣檢查等形式，對考核內(nèi)容、知識技能比例、考核方式和評價標(biāo)準(zhǔn)進(jìn)行科學(xué)性論證，專家一致通過OSCE考核體系在測試醫(yī)學(xué)影像技術(shù)專業(yè)能力方面的科學(xué)性和適用性。

3 討論

通過應(yīng)用OSCE考核體系的實踐及統(tǒng)計分析，該系統(tǒng)在學(xué)生考核的實施中科學(xué)、系統(tǒng)且形式多元，適用于人才培養(yǎng)質(zhì)量評估；在考核內(nèi)容和臨床案例方面，基于工作過程緊貼醫(yī)院放射科崗位，能夠真實反映考生專業(yè)能力水平，在組織形式上創(chuàng)建真實情境解決實際工作問題，激發(fā)學(xué)生考前的學(xué)習(xí)動力，構(gòu)建了“有用、有效、有趣”的OSCE考核體系。

3.1 突出能力考核

應(yīng)用技能操作、理論測試、口試等形式，在移動考站、PACS工作站、醫(yī)學(xué)影像設(shè)備、錄播系統(tǒng)和思維訓(xùn)練系統(tǒng)組成的數(shù)字化環(huán)境中，進(jìn)行醫(yī)學(xué)影像技術(shù)專業(yè)學(xué)生的16項核心工作能力的考核評估，可行性高并體現(xiàn)“有用”。通過OSCE考核結(jié)果的統(tǒng)計分析，A組和B組的對照顯示一致性好，考核體系的難度適中，區(qū)分度高，信度好，均可反映本系統(tǒng)能很好地用于醫(yī)學(xué)影像技術(shù)專業(yè)能力水平的評估活動[8-9]。

3.2 突出職業(yè)崗位

依據(jù)醫(yī)學(xué)影像技術(shù)專業(yè)人才培養(yǎng)方案和職業(yè)標(biāo)準(zhǔn)，設(shè)計OSCE系統(tǒng)的考站，涵蓋醫(yī)院放射科重要的職業(yè)崗位和工作內(nèi)容，其應(yīng)用效果好，并體現(xiàn)“有效”。通過效度分析，OSCE考核體系與全國衛(wèi)生職業(yè)資格放射醫(yī)學(xué)技術(shù)考核結(jié)果相關(guān)系數(shù)高，并經(jīng)行業(yè)專家論證，考站內(nèi)容、組織形式和評價標(biāo)準(zhǔn)等均能真實評估考生的專業(yè)知識和職業(yè)技能[10]。

3.3 突出教育特色

根據(jù)學(xué)生的基礎(chǔ)水平和培養(yǎng)目標(biāo)，在教學(xué)過程中為培養(yǎng)對象提供真實的職業(yè)環(huán)境和工作內(nèi)容，學(xué)生主動性高體現(xiàn)“有趣”。通過OSCE考核體系的組織和引導(dǎo)，學(xué)生在考前能積極參與知識學(xué)習(xí)和技能訓(xùn)練，具有較高的學(xué)習(xí)興趣，并有助于教師開展教學(xué)活動，提高人才培養(yǎng)質(zhì)量[11-12]。

4 結(jié)語

本研究成果在醫(yī)學(xué)影像技術(shù)職業(yè)能力評價方面具有較高的應(yīng)用價值，通過問卷調(diào)研分析，行業(yè)專家、專任教師及考生的認(rèn)可度高，是一種客觀有效的教學(xué)質(zhì)量評價工具，為同類院校開展相關(guān)工作提供了較好的實踐經(jīng)驗，同時考核結(jié)果可以有效地指導(dǎo)教學(xué)工作的改革，教學(xué)人員將不斷完善教學(xué)內(nèi)容，優(yōu)化教學(xué)過程，提高教學(xué)效果[13-14]。

[1]Jelly P，Sharma R.OSCE vs.TEM：Different approaches to assess clinical skills of nursing students[J].Iran J Nurs Midwifery Res，2017，22(1)：78-80.

[2]Ledford CJ，Seehusen DA，Canzona MR，et al.Using a teaching OSCE to prompt learners to engage with patients Who talk about religion and/or spirituality[J].Acad Med，2014，89(1)：60-65.

[3]仝霞.OSCE模式在護(hù)理綜合性實驗訓(xùn)練中的應(yīng)用[J].衛(wèi)生職業(yè)教育，2014，32(11)：97-98.

[4]馬肖容，劉原，徐孝軍，等.創(chuàng)新型SP/OSCE臨床技能考核體系的改革和探索[J].中國高等醫(yī)學(xué)教育，2013(11)：5-6.

[5]Pugh D，Hamstra SJ，Wood TJ，et al.A procedural skills OSCE：assessing technical and non-technical skills of internal medicine residents[J].Adv Health Sci Educ Theory Pract，2015，20(1)：85-100.

[6]Vest BM，Lynch A，McGuigan D，et al.Using standardized patient encounters to teach longitudinal continuity of care in a family medicine clerkship[J].BMC med educ，2016，16(1)：208.

[7]趙紅蘭，孫存杰，趙英紅，等.新醫(yī)療環(huán)境下醫(yī)學(xué)影像技術(shù)學(xué)的教學(xué)探索與思考[J].現(xiàn)代醫(yī)用影像學(xué)，2014(4)：458-460.

[8]Schleicher I，Leitner K，Juenger J，et al.Does quantity ensure quality? Standardized OSCE-stations for outcome-oriented evaluation of practical skills at different medical faculties[J].Ann Anat，2017，212：55-60.

[9]劉萬里，賀連香.PICC專科護(hù)士臨床相關(guān)能力評估量表的編制及信效度分析[J].護(hù)理學(xué)報，2016(1)：1-6.

[10]王妍，郭紅燕，趙揚(yáng)玉，等.婦產(chǎn)科碩士研究生臨床能力評估體系構(gòu)建的初步探討[J].中國高等醫(yī)學(xué)教育，2013(10)：13-14.

[11]宋俊巖，朱秀麗，苗秀欣，等.360名醫(yī)學(xué)院校本科生臨床思維能力及影響因素分析[J].護(hù)理學(xué)報，2014(17)：1-4.

[12]李習(xí)平，余林嵐.職業(yè)資格培訓(xùn)融入專業(yè)教學(xué)的探討—以中藥調(diào)劑員培訓(xùn)為例[J].當(dāng)代教育理論與實踐，2014(4)：33-34.

[13]徐筱婷，田蓉蓉，馬雯.基于職業(yè)教育特色的教學(xué)方法初探[J].教育教學(xué)論壇，2013(32)：193-194.

[14]Chengchen ZHU，Dequan ZHU.The Balanced Development of Vocational Education： Case Study on Four Municipalities in China[J].Cross-Cultural Communication，2015，11(4)：46-53.

The research about the evaluation system of vocational ability of medical imaging technique based on the OSCE

/YANG De-wu, DU Juan, QIU Zhun, et al

Objective:To design the objective structured clinical examination (OSCE) system for the vocational ability evaluation of medical image technique, and discuss the application value of the OSCE system in the evaluation of professional knowledge and vocational ability.Methods:Experts of the radiology department of various hospitals in Beijing were interviewed. The OSCE assessment system was designed according to the interview results.The standardized test and the OSCE assessment were applied to examine 36 students of medical imaging technology of class of 2015. And then the difficulty coefficient, discrimination, retest reliability and criterion validity of the assessment were researched and analyzed.Results:Each difficulty coefficient of the OSCE test stations was between 0.6 and 0.8. And the mean of discrimination was 0.557. The result of retest reliability analysis showed that r was 0.953 and P was significantly less than 0.01.The result of the criterion validity was that r was 0.978 and P was significantly less than 0.01.Conclusions:The evaluation system of medical imaging technique vocational ability based on the OSCE can scientifically and effectively evaluate the professional ability, and it can guide the development of teaching activities and enhance the quality of talent cultivation.

Test station; Standardized patient; Reliability; Validity; Evaluation system

School of Medical Technique, Beijing Health Vocational College, Beijing 100053, China.

楊德武,男,(1981- ),碩士，高級講師。北京衛(wèi)生職業(yè)學(xué)院醫(yī)學(xué)技術(shù)系，從事醫(yī)學(xué)影像技術(shù)專業(yè)教學(xué)工作。

1672-8270(2017)12-0116-04

R-05

A

10.3969/J.ISSN.1672-8270.2017.12.032

中華醫(yī)學(xué)會醫(yī)學(xué)教育分會和中國高等教育學(xué)會醫(yī)學(xué)教育專業(yè)委員會2016年醫(yī)學(xué)教育研究立項(2016B-PG016)“客觀結(jié)構(gòu)化考試在影像技術(shù)技能考評中的應(yīng)用”

①北京衛(wèi)生職業(yè)學(xué)院醫(yī)學(xué)技術(shù)系 北京 100053

②北京衛(wèi)生職業(yè)學(xué)院相關(guān)醫(yī)學(xué)與管理系 北京 100053

③北京衛(wèi)生職業(yè)學(xué)院實驗中心 北京 100053

//China Medical Equipment,2017,14(12):116-119.

2017-06-22