外科護理學試卷不同出題方式的質量評價1)

郭蕾蕾,張 林,劉 堃,宋雪薇

為了體現科學化、公平性考試的要求,我院對2006級本科外科護理學期末考試采用題庫抽題方式進行,通過試卷質量評價指標對題庫抽題與教師出題試卷進行比較分析,了解學生在不同出題方式下,對外科護理學知識的掌握程度和試卷質量,對科學評價試卷質量、合理出題和題庫建設具有重要的意義。

1 對象與方法

整群抽取遼寧醫學院2005級、2006級本科外科護理學試卷249份,其中教師出題 115份,題庫抽題 134份,題型分布見表1?？荚噺某鲱}到批改,嚴格遵守遼寧醫學院考試規程,考試試卷經過流程批改核對,數據采用得分點計分,對各個題型的得分點單獨計分,各題型得分點分布見表2;難度系數中,選擇題采用校正猜測機遇后的難度系數,主觀題采用平均得分率法;區分度采用極差法;信度中,選擇題采用庫德-理查遜(Kuder-Richardson)信度法,主觀題采用克朗巴赫(α)系數法;效度采用區分度估計。全部數據雙人盲法錄入SPSS17.0軟件進行統計學分析。

表1 兩種試卷題型分布 題(分)

表2 兩種試卷各題型得分點分布 題(點)

2 結果(見表3～表 6)

表3 采用教師出題與題庫抽題試卷成績分布比較 人(%)

表4 兩種試卷各題型質量評價情況

表5 兩種試卷試題得分點難易度分布 點

表6 兩種試卷試題得分點區分度分布 點

3 討論

3.1 試卷結構及成績分布 題庫抽題后,總題量變化不大,得分點個數增加5個。應用教師出題、題庫抽題試卷不及格率分別是1.74%、1.49%,不及格率有所下降,均維持在低水平;應用題庫抽題試卷,成績分布達及格、中等人數比例大幅上升,分別上升了16.05%、19.08%;良好比例下降了 31.41%,優秀率為0。這與部分題型的難易度加大有關,使得低分數組段的比例上升。

3.2 試卷分析

3.2.1 難易度 難易度是反映學生完成試題難易程度的定量指標,取值范圍為0～1,難度系數數值越大,說明試題難度越小,反之亦然[1]。課程合格性考試試卷一般要求難度在0.5～0.7,改革考試方法后,試卷總體的難度升高,各題型難易度分布在0.7左右,難易度較好,名詞解釋和病例分析等主觀題難易度增加;極難題、難題、中等題、較易題所占比例上升,分別由原來的3.08%、9.23%、6.15%、20.00%上升到 10.00%、20.00%、7.14%、22.86%,而較難題、容易題所占比例下降,分別由原來的9.23%、52.31%下降到 4.29%、35.71%?？赡芘c題庫抽題試卷強調知識點造成的考試猜測幾率減小有關,知識點的考核更加全面。

3.2.2 區分度 區分度是反映學生掌握知識差異的能力的定量指標,取值范圍為0～1,區分度越大,區分效果越好[2]。課程合格性考試,試題區分度一般要求在0.3～0.4。兩種試卷區分度均不理想,題庫抽題后區分度除填空題外,各題型均有一定程度下降,而區分度差的題比例大幅下降,尚可、良好、非常好題目比例均有不同程度上升,這與題庫中試題的質量相關。我院外科護理學題庫經過外科教研室數位經驗豐富的老師修訂,目前還在不斷的完善中,避免了教師出題時臨時編制題目造成的題目區分度的降低,影響了試卷質量。

3.2.3 信度 它是表示考試的可靠性,取值范圍一般為-1～1,其值越大,信度越高[3]。高校課程的合格性考試對信度的要求一般大于0.5。改革考核方式后名詞解釋題的信度上升了0.51;填空題下降了0.09,選擇題、簡答題、病例分析題信度變化不大,試卷總體信度>0.5,符合要求,能比較真實地反映考生的成績。題庫的題型多經過多次篩選,教研室多年教學過程中的積累對題庫建設至關重要,題目能反映考試的真實性。

3.2.4 效度 效度的高低是反映整套試卷命題的準確性和有效性的重要參數,取值范圍為0～1,也是考試結果能否準確地反映所要測量的特性或功能的程度[1]。一次考試,其效度一般應在0.3～0.7之間。改革考試方式后,名詞解釋和病例分析題的效度大幅下降,這可能與評改過程的誤差和效度計算方法有關,因為條件的限制,未能采用專家評定的內容效度,而只是采用區分度估計,區分度不是太理想的情況下,未能真實反映效度。

3.3 對策

3.3.1 加強題庫建設,提高試卷質量 外科護理學教師每年通過試卷分析了解往年題目特點,在配合考試中心保密制度的原則下,對外科護理學的題庫進行增補、刪減,目前已經形成了2 000余道題的題庫。題庫建設應適時調整,刪除部分區分度較差的題目,加強部分主觀題的區分度,雖然外科護理學試卷的評改有規章,但由于個人傾向的存在,名詞解釋給分較為單一,區分度偏低,應提高此類主觀題的區分度,提高病例分析題的應答能力;擴大較易題、中等難度題比例,在不降低難度的同時,保持較好的區分度,通過嚴把考試和試題質量關,提高題目的信度;按照教學大綱和考試要求出題,提高試卷總體的效度,每年應在不增加試卷考題量的同時,適當增加考點數。

3.3.2 完善考核方式,嚴格考評流程 采用在試卷成績、實驗課/見習課和平時表現相結合的考核辦法,綜合對外科護理學的考核方式;嚴格評分標準,評分標準要統一,評分人員要培訓,盡量采用流水作業式評卷方法;對考后試卷進行全面分析,了解學生對試卷知識點的掌握,有針對性地在以后的教學中彌補不足。

總之,應積極探索題庫考評方式,在題庫建設中提高中等難度題目的比例,適當調整試題區分度,調整、刪除部分區分度較差的題目;提高主觀題,特別是病例分析題的應答能力;加強部分主觀題的區分度,提高此類題型的信度;按照教學大綱和考試要求出題,提高試卷總體的效度;嚴格考試流程,嚴把質量關;通過教與考提高教學質量。

[1]陳熙,吳成秋,賀棟梁.試卷分析與評價的指標體系及其應用[J].西北醫學教育,2006,14(5):542-543.

[2]張麗,王輝,李新征.2005級專升本婦產科護理學試卷質量分析[J].護理研究,2008,22(1A):81-82.

[3]圈彥偉.相關性在教育測量中的應用[J].湖北第二師范學院學報,2008,25(2):80-84.