基于客觀結(jié)構(gòu)化臨床考試的醫(yī)學(xué)影像技術(shù)職業(yè)能力評(píng)價(jià)體系研究*

楊德武 杜 娟 邱 準(zhǔn) 武 力

基于客觀結(jié)構(gòu)化臨床考試的醫(yī)學(xué)影像技術(shù)職業(yè)能力評(píng)價(jià)體系研究*

楊德武①杜 娟②邱 準(zhǔn)③武 力③

目的：設(shè)計(jì)醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)職業(yè)能力評(píng)價(jià)的客觀結(jié)構(gòu)化臨床考試(OSCE)體系，探討OSCE體系在進(jìn)行專(zhuān)業(yè)知識(shí)和職業(yè)能力評(píng)估中的應(yīng)用價(jià)值。方法：采取訪談的形式對(duì)北京市醫(yī)院放射科專(zhuān)家進(jìn)行調(diào)研，設(shè)計(jì)OSCE考核體系；對(duì)醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)2015級(jí)36名學(xué)生開(kāi)展標(biāo)準(zhǔn)化測(cè)試與OSCE考核，并對(duì)考核成績(jī)的難度、區(qū)分度、重測(cè)信度和效標(biāo)效度進(jìn)行統(tǒng)計(jì)分析。結(jié)果：OSCE考核體系的考站難度系數(shù)均為0.6～0.8，區(qū)分度平均值為0.557，重測(cè)信度分析結(jié)果r=0.953，P＜0.01，效標(biāo)效度分析結(jié)果r=0.978，P＜0.01。結(jié)論：基于OSCE的醫(yī)學(xué)影像技術(shù)職業(yè)能力評(píng)價(jià)體系能夠科學(xué)有效地進(jìn)行專(zhuān)業(yè)能力評(píng)估，并可指導(dǎo)教學(xué)活動(dòng)的開(kāi)展，提高人才培養(yǎng)質(zhì)量。

考站；標(biāo)準(zhǔn)化患者；信度；效度；評(píng)價(jià)體系

隨著臨床醫(yī)學(xué)和影像設(shè)備的不斷發(fā)展，影像檢查、診斷與治療技術(shù)在醫(yī)療衛(wèi)生行業(yè)中發(fā)揮著越來(lái)越重要的作用，同時(shí)對(duì)醫(yī)院放射技術(shù)人員提出了新的要求。在高等院校中，評(píng)價(jià)醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)學(xué)生是否具備相應(yīng)的臨床能力，是人才培養(yǎng)質(zhì)量評(píng)估的一項(xiàng)重要內(nèi)容。傳統(tǒng)的評(píng)價(jià)方法多以理論考試為主，職業(yè)能力考核方式多局限在單一的工作內(nèi)容上，缺乏對(duì)職業(yè)能力培養(yǎng)效果的系統(tǒng)性評(píng)定。為此，本研究在客觀結(jié)構(gòu)化臨床考試(objective structured clinical examination，OSCE)模式基礎(chǔ)上，設(shè)計(jì)醫(yī)學(xué)影像技術(shù)職業(yè)能力考站和標(biāo)準(zhǔn)化患者(圖像)，在理論知識(shí)、專(zhuān)業(yè)技能和職業(yè)素質(zhì)3個(gè)維度開(kāi)展學(xué)生能力評(píng)價(jià)，探討OSCE評(píng)價(jià)體系的應(yīng)用價(jià)值[1-2]。

1 資料與方法

1.1 基本資料

選取北京衛(wèi)生職業(yè)學(xué)院醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)2015級(jí)三年制高職班36名二年級(jí)學(xué)生，其中女生16名，男生20名，已完成兩年在校所有專(zhuān)業(yè)課程的學(xué)習(xí)，在即將進(jìn)入醫(yī)院實(shí)習(xí)前進(jìn)行專(zhuān)業(yè)知識(shí)和職業(yè)能力考核?？己朔謩e于2017年5月進(jìn)行標(biāo)準(zhǔn)化測(cè)試，2017年6月進(jìn)行OSCE考核；根據(jù)測(cè)試結(jié)果將36名考生的成績(jī)排序，并將其按照排序奇數(shù)和偶數(shù)分為A組和B組，每組18名，對(duì)兩組標(biāo)準(zhǔn)化測(cè)試成績(jī)和OSCE考核成績(jī)進(jìn)行對(duì)比分析。

1.2 OSCE考站設(shè)置

為確保OSCE考站內(nèi)容與職業(yè)崗位工作的一致性，在對(duì)北京市醫(yī)院放射科50余位技術(shù)專(zhuān)家進(jìn)行調(diào)研訪談的基礎(chǔ)上，制定不同影像設(shè)備和工作崗位職業(yè)能力的標(biāo)準(zhǔn)[3-4]。結(jié)合OSCE考核模式的特點(diǎn)及組織實(shí)施需要，對(duì)選定的影像技術(shù)專(zhuān)業(yè)核心技能要素進(jìn)行整理，共設(shè)計(jì)9個(gè)考站，其中包括16項(xiàng)能力考核，即放射科登記考站、DR影像采集考站、CT影像采集考站、MRI影像采集考站、超聲影像采集考站、影像質(zhì)量評(píng)價(jià)考站、影像處理考站、影像診斷考站和影像打印考站，見(jiàn)表1。

1.3 考核內(nèi)容編寫(xiě)

由醫(yī)院放射科專(zhuān)家、專(zhuān)業(yè)教師、實(shí)驗(yàn)教師和教務(wù)管理人員共同組成課題小組開(kāi)展研討交流，設(shè)計(jì)完成OSCE考站的考核內(nèi)容中臨床案例、工作場(chǎng)景、技能操作流程、理論知識(shí)考題、職業(yè)素質(zhì)要求、評(píng)分標(biāo)準(zhǔn)、設(shè)備配置及考場(chǎng)安排等內(nèi)容?？颊镜臉?biāo)準(zhǔn)化患者(圖像)均選取自北京市三甲醫(yī)院放射科的真實(shí)病例，為保障臨床案例的可操作性和典型性，對(duì)20例標(biāo)準(zhǔn)化患者的臨床病歷進(jìn)一步整理充實(shí)，并且對(duì)20套標(biāo)準(zhǔn)化圖像設(shè)計(jì)處理優(yōu)化方案。OSCE考站配置包括登記工作站、DR檢查室、CT檢查室、MRI檢查室、超聲檢查室、PACS工作站、打印工作站、錄播系統(tǒng)和思維訓(xùn)練系統(tǒng)，根據(jù)考站的內(nèi)容和形式分別設(shè)計(jì)技能操作項(xiàng)目和理論考試題庫(kù)，通過(guò)錄播系統(tǒng)實(shí)時(shí)采集考生的操作以及思維訓(xùn)練系統(tǒng)進(jìn)行在線測(cè)試，并參照制定的考站評(píng)分系統(tǒng)進(jìn)行系統(tǒng)評(píng)價(jià)、教師評(píng)價(jià)和標(biāo)準(zhǔn)化患者評(píng)價(jià)。

1.4 標(biāo)準(zhǔn)化患者及圖像處理培訓(xùn)

依據(jù)OSCE考核內(nèi)容及實(shí)施要求，考站1～5標(biāo)準(zhǔn)化患者培訓(xùn)的主要對(duì)象是教師和學(xué)生兩類(lèi)人群，主要涉及患者信息描述、臨床病癥演示及醫(yī)患溝通等內(nèi)容，經(jīng)過(guò)理論學(xué)習(xí)、集中培訓(xùn)、病癥演示和考核評(píng)分等流程，選取2位教師和18位學(xué)生作為OSCE考站的標(biāo)準(zhǔn)化患者。同時(shí)對(duì)考站6～9的標(biāo)準(zhǔn)化圖像進(jìn)行處理，針對(duì)不同考核內(nèi)容設(shè)置圖像窗寬窗位值、增減序列圖像、核對(duì)容積數(shù)據(jù)量、添加病史信息、關(guān)聯(lián)患者及標(biāo)注信息等，處理后的圖像經(jīng)課題小組審核后分類(lèi)導(dǎo)入影像歸檔及傳輸系統(tǒng)(picture archiving and communication systems，PACS)并標(biāo)記注明。標(biāo)準(zhǔn)化患者培訓(xùn)和標(biāo)準(zhǔn)圖像處理嚴(yán)格按照臨床崗位標(biāo)準(zhǔn)的要求進(jìn)行設(shè)計(jì)，以此保障OSCE考站運(yùn)行的科學(xué)性和規(guī)范性[3-4]。

1.5 標(biāo)準(zhǔn)化測(cè)試與OSCE考核

(1)兩組標(biāo)準(zhǔn)化測(cè)試。在測(cè)試內(nèi)容選取上嚴(yán)格按照全國(guó)衛(wèi)生專(zhuān)業(yè)技術(shù)資格放射醫(yī)學(xué)技術(shù)考試大綱要求，課題組專(zhuān)家節(jié)選歷年考試真題及試題庫(kù)中的技能操作部分編寫(xiě)標(biāo)準(zhǔn)化試卷，根據(jù)測(cè)試結(jié)果將36名考生的成績(jī)排序，奇數(shù)位18位同學(xué)設(shè)定為A組，偶數(shù)位18位同學(xué)設(shè)定為B組。

(2)兩組OSCE考核。在實(shí)驗(yàn)樓醫(yī)學(xué)影像實(shí)訓(xùn)中心進(jìn)行OSCE考核，各站根據(jù)考核需要配置設(shè)備及考核系統(tǒng)：在PACS中主要進(jìn)行登記、影像質(zhì)量評(píng)價(jià)、影像處理及影像診斷等操作內(nèi)容考核；醫(yī)學(xué)影像設(shè)備進(jìn)行檢查技術(shù)操作內(nèi)容考核；打印機(jī)完成檢查結(jié)果的打印操作內(nèi)容考核；錄播系統(tǒng)進(jìn)行操作過(guò)程的錄制、保存及查閱；思維訓(xùn)練系統(tǒng)進(jìn)行各站理論內(nèi)容的考核及評(píng)閱[5]。OSCE考核對(duì)A組和B組依次開(kāi)展考核，考站隨機(jī)選定1名教師和行業(yè)專(zhuān)家組成考站評(píng)分者，9名志愿者分別完成考站的組織及引導(dǎo)工作，課題負(fù)責(zé)人根據(jù)考站的分值權(quán)重進(jìn)行成績(jī)匯總和分析[6]。

表1 醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)OSCE考站設(shè)置

1.6 統(tǒng)計(jì)學(xué)方法

考生成績(jī)分標(biāo)準(zhǔn)化測(cè)試成績(jī)和OSCE考核成績(jī)兩部分，應(yīng)用SPSS19.0統(tǒng)計(jì)軟件對(duì)A組和B組進(jìn)行對(duì)比統(tǒng)計(jì)分析，即OSCE考核結(jié)果的難度、區(qū)分度、信度和效度指標(biāo)的分析，用于評(píng)估OSCE考核體系對(duì)學(xué)生放射檢查技術(shù)能力評(píng)價(jià)的實(shí)用性和科學(xué)性。以P＜0.01為差異有統(tǒng)計(jì)學(xué)意義。

2 結(jié)果

2.1 OSCE考核成績(jī)分析

(1)OSCE考核的兩組考生平均成績(jī)?yōu)?3.22，最低分48，最高分93，正態(tài)分布檢驗(yàn)結(jié)果顯示，偏度系數(shù)Skewness=-0.252，峰度系數(shù)Kurtosis=0.078，兩個(gè)系數(shù)均＜1，可認(rèn)為近似于正態(tài)分布，如圖1所示。

圖1 OSCE成績(jī)分布示圖

(2)試題難度采用難度系數(shù)(P)表示。難度系數(shù)與試題實(shí)際難易程度正好相反，難度系數(shù)P值越大表明試題越容易。多數(shù)試題P值應(yīng)分布在0.3～0.7之間，選拔性考試為0.5左右為宜，通常在校考試為目標(biāo)參照性考試，可適當(dāng)偏高，平均難度以0.7左右為宜。本次各考站難度系數(shù)均為0.6～0.8，在教育評(píng)估和測(cè)量領(lǐng)域?qū)儆跇?biāo)準(zhǔn)考試參照范圍，因此，本次考試的難度是適宜的。區(qū)分度(D)指試題對(duì)被試者情況的分辨能力的大小，區(qū)分度D值應(yīng)在為-1～+1之間，D值＞0.4表明區(qū)分度很好。OSCE考核體系區(qū)分度指標(biāo)D值基本＞0.4，表明對(duì)考生的臨床技能評(píng)定具有較好的區(qū)分能力；各考站的成績(jī)統(tǒng)計(jì)結(jié)果見(jiàn)表2。

2.2 OSCE信度分析

為檢測(cè)OSCE考核體系的一致性和穩(wěn)定性，通過(guò)采用Pearson法對(duì)A組和B組考試成績(jī)進(jìn)行相關(guān)性分析，其重測(cè)信度經(jīng)統(tǒng)計(jì)分析，相關(guān)系數(shù)r=0.953，P＜0.01，表明這兩次測(cè)驗(yàn)的重測(cè)信度很高。同時(shí)，對(duì)各考站的評(píng)分者進(jìn)行了信度分析，如果為兩個(gè)評(píng)分者，則采用積差相關(guān)分析，認(rèn)為結(jié)果訓(xùn)練的成對(duì)評(píng)分者之間的一致性達(dá)到0.90以上，評(píng)分為客觀。在評(píng)分者進(jìn)行獨(dú)立評(píng)分的基礎(chǔ)上，各考站評(píng)分者信度均在0.92～0.97之間，評(píng)分者之間的一致性較高。

2.3 OSCE效度分析

在OSCE考核體系的效度分析方面，首先計(jì)算考試的效標(biāo)效度，即考試結(jié)果與效標(biāo)之間的一致程度[7]。使用學(xué)生標(biāo)準(zhǔn)化考試成績(jī)作為效標(biāo)，利用Pearson法，即積差相關(guān)法求效標(biāo)效度，相關(guān)系數(shù)r=0.978，P＜0.01，為高度相關(guān)，表明OSCE考核的有效性。為進(jìn)一步論證系統(tǒng)的有效性，組織20余位北京市各級(jí)各類(lèi)醫(yī)院放射科專(zhuān)家進(jìn)行論證分析，通過(guò)OSCE系統(tǒng)討論、考核數(shù)據(jù)檢測(cè)及考生抽樣檢查等形式，對(duì)考核內(nèi)容、知識(shí)技能比例、考核方式和評(píng)價(jià)標(biāo)準(zhǔn)進(jìn)行科學(xué)性論證，專(zhuān)家一致通過(guò)OSCE考核體系在測(cè)試醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)能力方面的科學(xué)性和適用性。

3 討論

通過(guò)應(yīng)用OSCE考核體系的實(shí)踐及統(tǒng)計(jì)分析，該系統(tǒng)在學(xué)生考核的實(shí)施中科學(xué)、系統(tǒng)且形式多元，適用于人才培養(yǎng)質(zhì)量評(píng)估；在考核內(nèi)容和臨床案例方面，基于工作過(guò)程緊貼醫(yī)院放射科崗位，能夠真實(shí)反映考生專(zhuān)業(yè)能力水平，在組織形式上創(chuàng)建真實(shí)情境解決實(shí)際工作問(wèn)題，激發(fā)學(xué)生考前的學(xué)習(xí)動(dòng)力，構(gòu)建了“有用、有效、有趣”的OSCE考核體系。

3.1 突出能力考核

應(yīng)用技能操作、理論測(cè)試、口試等形式，在移動(dòng)考站、PACS工作站、醫(yī)學(xué)影像設(shè)備、錄播系統(tǒng)和思維訓(xùn)練系統(tǒng)組成的數(shù)字化環(huán)境中，進(jìn)行醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)學(xué)生的16項(xiàng)核心工作能力的考核評(píng)估，可行性高并體現(xiàn)“有用”。通過(guò)OSCE考核結(jié)果的統(tǒng)計(jì)分析，A組和B組的對(duì)照顯示一致性好，考核體系的難度適中，區(qū)分度高，信度好，均可反映本系統(tǒng)能很好地用于醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)能力水平的評(píng)估活動(dòng)[8-9]。

3.2 突出職業(yè)崗位

依據(jù)醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)人才培養(yǎng)方案和職業(yè)標(biāo)準(zhǔn)，設(shè)計(jì)OSCE系統(tǒng)的考站，涵蓋醫(yī)院放射科重要的職業(yè)崗位和工作內(nèi)容，其應(yīng)用效果好，并體現(xiàn)“有效”。通過(guò)效度分析，OSCE考核體系與全國(guó)衛(wèi)生職業(yè)資格放射醫(yī)學(xué)技術(shù)考核結(jié)果相關(guān)系數(shù)高，并經(jīng)行業(yè)專(zhuān)家論證，考站內(nèi)容、組織形式和評(píng)價(jià)標(biāo)準(zhǔn)等均能真實(shí)評(píng)估考生的專(zhuān)業(yè)知識(shí)和職業(yè)技能[10]。

3.3 突出教育特色

根據(jù)學(xué)生的基礎(chǔ)水平和培養(yǎng)目標(biāo)，在教學(xué)過(guò)程中為培養(yǎng)對(duì)象提供真實(shí)的職業(yè)環(huán)境和工作內(nèi)容，學(xué)生主動(dòng)性高體現(xiàn)“有趣”。通過(guò)OSCE考核體系的組織和引導(dǎo)，學(xué)生在考前能積極參與知識(shí)學(xué)習(xí)和技能訓(xùn)練，具有較高的學(xué)習(xí)興趣，并有助于教師開(kāi)展教學(xué)活動(dòng)，提高人才培養(yǎng)質(zhì)量[11-12]。

4 結(jié)語(yǔ)

本研究成果在醫(yī)學(xué)影像技術(shù)職業(yè)能力評(píng)價(jià)方面具有較高的應(yīng)用價(jià)值，通過(guò)問(wèn)卷調(diào)研分析，行業(yè)專(zhuān)家、專(zhuān)任教師及考生的認(rèn)可度高，是一種客觀有效的教學(xué)質(zhì)量評(píng)價(jià)工具，為同類(lèi)院校開(kāi)展相關(guān)工作提供了較好的實(shí)踐經(jīng)驗(yàn)，同時(shí)考核結(jié)果可以有效地指導(dǎo)教學(xué)工作的改革，教學(xué)人員將不斷完善教學(xué)內(nèi)容，優(yōu)化教學(xué)過(guò)程，提高教學(xué)效果[13-14]。

[1]Jelly P，Sharma R.OSCE vs.TEM：Different approaches to assess clinical skills of nursing students[J].Iran J Nurs Midwifery Res，2017，22(1)：78-80.

[2]Ledford CJ，Seehusen DA，Canzona MR，et al.Using a teaching OSCE to prompt learners to engage with patients Who talk about religion and/or spirituality[J].Acad Med，2014，89(1)：60-65.

[3]仝霞.OSCE模式在護(hù)理綜合性實(shí)驗(yàn)訓(xùn)練中的應(yīng)用[J].衛(wèi)生職業(yè)教育，2014，32(11)：97-98.

[4]馬肖容，劉原，徐孝軍，等.創(chuàng)新型SP/OSCE臨床技能考核體系的改革和探索[J].中國(guó)高等醫(yī)學(xué)教育，2013(11)：5-6.

[5]Pugh D，Hamstra SJ，Wood TJ，et al.A procedural skills OSCE：assessing technical and non-technical skills of internal medicine residents[J].Adv Health Sci Educ Theory Pract，2015，20(1)：85-100.

[6]Vest BM，Lynch A，McGuigan D，et al.Using standardized patient encounters to teach longitudinal continuity of care in a family medicine clerkship[J].BMC med educ，2016，16(1)：208.

[7]趙紅蘭，孫存杰，趙英紅，等.新醫(yī)療環(huán)境下醫(yī)學(xué)影像技術(shù)學(xué)的教學(xué)探索與思考[J].現(xiàn)代醫(yī)用影像學(xué)，2014(4)：458-460.

[8]Schleicher I，Leitner K，Juenger J，et al.Does quantity ensure quality? Standardized OSCE-stations for outcome-oriented evaluation of practical skills at different medical faculties[J].Ann Anat，2017，212：55-60.

[9]劉萬(wàn)里，賀連香.PICC專(zhuān)科護(hù)士臨床相關(guān)能力評(píng)估量表的編制及信效度分析[J].護(hù)理學(xué)報(bào)，2016(1)：1-6.

[10]王妍，郭紅燕，趙揚(yáng)玉，等.婦產(chǎn)科碩士研究生臨床能力評(píng)估體系構(gòu)建的初步探討[J].中國(guó)高等醫(yī)學(xué)教育，2013(10)：13-14.

[11]宋俊巖，朱秀麗，苗秀欣，等.360名醫(yī)學(xué)院校本科生臨床思維能力及影響因素分析[J].護(hù)理學(xué)報(bào)，2014(17)：1-4.

[12]李習(xí)平，余林嵐.職業(yè)資格培訓(xùn)融入專(zhuān)業(yè)教學(xué)的探討—以中藥調(diào)劑員培訓(xùn)為例[J].當(dāng)代教育理論與實(shí)踐，2014(4)：33-34.

[13]徐筱婷，田蓉蓉，馬雯.基于職業(yè)教育特色的教學(xué)方法初探[J].教育教學(xué)論壇，2013(32)：193-194.

[14]Chengchen ZHU，Dequan ZHU.The Balanced Development of Vocational Education： Case Study on Four Municipalities in China[J].Cross-Cultural Communication，2015，11(4)：46-53.

The research about the evaluation system of vocational ability of medical imaging technique based on the OSCE

/YANG De-wu, DU Juan, QIU Zhun, et al

Objective:To design the objective structured clinical examination (OSCE) system for the vocational ability evaluation of medical image technique, and discuss the application value of the OSCE system in the evaluation of professional knowledge and vocational ability.Methods:Experts of the radiology department of various hospitals in Beijing were interviewed. The OSCE assessment system was designed according to the interview results.The standardized test and the OSCE assessment were applied to examine 36 students of medical imaging technology of class of 2015. And then the difficulty coefficient, discrimination, retest reliability and criterion validity of the assessment were researched and analyzed.Results:Each difficulty coefficient of the OSCE test stations was between 0.6 and 0.8. And the mean of discrimination was 0.557. The result of retest reliability analysis showed that r was 0.953 and P was significantly less than 0.01.The result of the criterion validity was that r was 0.978 and P was significantly less than 0.01.Conclusions:The evaluation system of medical imaging technique vocational ability based on the OSCE can scientifically and effectively evaluate the professional ability, and it can guide the development of teaching activities and enhance the quality of talent cultivation.

Test station; Standardized patient; Reliability; Validity; Evaluation system

School of Medical Technique, Beijing Health Vocational College, Beijing 100053, China.

楊德武,男,(1981- ),碩士，高級(jí)講師。北京衛(wèi)生職業(yè)學(xué)院醫(yī)學(xué)技術(shù)系，從事醫(yī)學(xué)影像技術(shù)專(zhuān)業(yè)教學(xué)工作。

1672-8270(2017)12-0116-04

R-05

A

10.3969/J.ISSN.1672-8270.2017.12.032

中華醫(yī)學(xué)會(huì)醫(yī)學(xué)教育分會(huì)和中國(guó)高等教育學(xué)會(huì)醫(yī)學(xué)教育專(zhuān)業(yè)委員會(huì)2016年醫(yī)學(xué)教育研究立項(xiàng)(2016B-PG016)“客觀結(jié)構(gòu)化考試在影像技術(shù)技能考評(píng)中的應(yīng)用”

①北京衛(wèi)生職業(yè)學(xué)院醫(yī)學(xué)技術(shù)系 北京 100053

②北京衛(wèi)生職業(yè)學(xué)院相關(guān)醫(yī)學(xué)與管理系 北京 100053

③北京衛(wèi)生職業(yè)學(xué)院實(shí)驗(yàn)中心 北京 100053

//China Medical Equipment,2017,14(12):116-119.

2017-06-22