?

八年制口腔醫學專業口腔臨床藥物學期末考試成績和試卷質量分析與評價

2017-11-04 02:26趙電紅董美麗劉立婷謝來洪鄭利光
中國高等醫學教育 2017年6期
關鍵詞:區分度信度試卷

趙電紅,董美麗,劉立婷,韓 蕊,謝來洪,鄭利光

(北京大學口腔醫學院/北京大學口腔醫院,北京 100081)

●教學管理

八年制口腔醫學專業口腔臨床藥物學期末考試成績和試卷質量分析與評價

趙電紅,董美麗,劉立婷,韓 蕊,謝來洪,鄭利光

(北京大學口腔醫學院/北京大學口腔醫院,北京 100081)

目的:對北京大學口腔醫學院八年制口腔醫學專業口腔臨床藥物學考試成績和試卷質量進行分析與評價,了解試卷質量和學生的學習情況,評價教學質量,為進一步的教學改革提供依據。方法:采用SPSS統計軟件和教學測量學的原理和方法對試卷的信度、難度、區分度和成績進行分析。結果:2009、2010、2011級平均成績分別為81.60、83.64、87.10分,標準差為7.48、7.34、8.42,信度系數分別為0.784、0.737、0.792,呈負偏態分布;試卷難度系數分別為0.82、0.84、0.87,區分度分別為0.18、0.19、0.32;試題中難度系數較高的是簡答題和問答題,區分度較好的是翻譯題、單選題和問答題。結論:學生成績較好,試卷整體難度偏易,部分題型的難度和區分度不理想,試題質量有待提高。

八年制口腔醫學;口腔臨床藥物學;考試成績;試卷質量;教學評價

口腔臨床藥物學課程內容豐富、知識點多而散、學習難度較大,教學效果的優劣對學生畢業后從事口腔醫學工作的能力和水平有很大影響[1]??荚囀菣z查教學質量優劣的最基本、最有效、最直接的方法,是衡量教學效果的重要指標,也是教學工作的重要環節[2-3]。分析考試成績和試卷質量,可以在一定程度上反映學生對知識的理解和掌握程度,還可以評價教師的教學質量,為改進教學工作、提高教學質量提供重要的反饋信息[4]。成績統計分析一般包括成績統計描述和成績統計推斷兩個方面,成績統計描述則包括成績分布態勢的直觀描述、成績平均趨勢、成績等級構成的描述以及優秀率、及格率等的描述;成績的統計推斷則包括基于原始成績數據(或派生數據)的有關率的推斷以及成績等級構成的推斷[5]。目前國內試卷分析較常用的指標包括試卷信度、難度、區分度等指標[2-5]。本文依據成績統計分析和試卷分析的理論與方法,對北京大學口腔醫學院2009-2011級八年制口腔醫學生口腔臨床藥物學課程的考試成績和試卷質量進行了分析和探討,以此來反饋教學過程,為進一步的教學改革提供依據,更好的促進口腔臨床藥物學的教學效果。

一、資料與方法

(一)資料。

北京大學口腔醫學院八年制口腔臨床醫學生,2009級38人、2010級39人、2011級62人,采用人民衛生出版社出版的《口腔臨床藥物學》第4版[6](史宗道主編)作為教材??荚嚽敖M織召開命題專題討論會,授課教師根據教學大綱要求,按照所授章節內容占比合理分配分值,以知識的認知分級(重點掌握、較為熟悉、一般了解)和教學目標(記憶、理解、應用)來確定分數的分布,最終由教學主任從題庫中隨機抽題組卷??荚囉山逃幗y一組織、安排,閉卷考試,由兩人監考,考試時間120分鐘。

口腔臨床藥物學期末考試試卷滿分100分,共有五道大題、79道小題:客觀題滿分55分,包括填空題(40題×1分)、翻譯題(10題×0.5分)、選擇題(20題×0.5分);主觀題滿分45分,包括簡答題(6題×5分)和問答題(3題×5分)。試卷范圍涵蓋總論、消毒防腐藥、口腔局部治療劑、維生素藥物、局麻藥物、止痛藥、激素和抗菌藥物等與口腔臨床結合密切需要學生重點掌握的相關內容。

(二)方法。

1.評分方法。根據考前制定的標準答案和評卷標準,兩位授課教師共同閱卷,客觀題參考標準答案,主觀題取平均分,教學主任復核后,教學秘書統一進行成績錄入。

2.數據處理。采用SPSS 19.0統計軟件、教學測量學的原理和方法對考試成績和試卷質量進行分析。成績分析主要側重在考試的整體水平,評價指標有最高分、最低分、平均分、標準差、優秀率等。試題和試卷質量分析指標主要包括難度系數、區分度、信度等指標。難度是衡量試題難易程度的指標,區分度是試題對考生水平的區別能力,信度表示考試的可靠性[3]。

二、研究結果

(一)考試成績。

本試卷卷面成績滿分100分,按照優秀(≥90分)、良好(80-90)、中等(70-79)、及格(60-79)、不及格(<60)劃分為五個等級。所有學生全部參加考試,及格率為100%,其中2009級考生最高95.5分,最低60分,平均81.60分,標準差為7.48,優秀率7.89%;2010級考生最高94.5分,最低60分,平均83.64分,標準差為7.34,優秀率28.21%;2011級考生最高97.5分,最低60分,平均87.10分,標準差為8.42,優秀率45.16%。各級成績分數段頻數分布分別如下(見表1、附圖)。

表1 2009-2011級口腔臨床藥物學成績頻數分布

(二)試卷質量。

1.信度分析。信度分析是反映試卷題目得分一致性程度的統計量,通常用信度系數表示考試的可靠性指標,其取值范圍為0-1,其高低反映了考試中隨機因素影響的大小,其值越大,信度越高[7],牛學敏認為信度在0.8-1為優、0.6-0.8為良、0.3-0.6為合格、0.3以下為不合格[8]。利用SPSS19.0進行信度分析,2009級、2010級和2011級的Cronbach’sα分別為0.784、0.737、0.792,可認為本試卷的測試結果信度較高。

2.難度與區分度。難度(P)表示試題或試卷難易程度,0≤P≤1,P值越大,說明試題或試卷越容易。對于檢查性的期末考試,通常認為0.6≤P≤0.8較為合適[9]。難度P=成績總和/理論滿分總和,代入數據計算,具體如下(見表2)。

附圖 各級口腔臨床藥物學成績分布直方圖(A-2009級、B-2010級、C-2011級)

區分度(D)是反映學生掌握知識水平差異的能力的重要要素,即用分數將學生區分為若干部分的系數。采用極端法[10]計算D,將全體考生人數乘以0.27,定為分組的人數(n),將全體考生分為高分組(成績最高的n個考生)和低分組(成績最低的n個考生),D=(高分組學生的通過率)-(低分組學生的通過率),具體如下(見表3)。

表3 2009-2011級口腔臨床藥物學試題、試卷的區分度(D)

(三)試題題型分值情況分析。

2009-2011級口腔臨床藥物學考試中各題型的得分、失分情況,具體如下(見表4)。

三、分析與討論

(一)卷面成績分析。

2009級、2010級主要集中在80-90分,2011級主要集中在90分以上,高分學生逐年增加,三年間優秀率約增長了4.72倍。一方面可以說明授課教師近幾年改革傳統教學模式,在教學中逐步采用啟發式、問題式、互動式等多種教學方法,將與口腔臨床密切相關的抗微生物藥物、局部麻醉藥物、鎮痛藥物、牙體牙髓病藥物、牙周病藥物、口腔黏膜病藥物等重點藥物進行歸納分析比較,加深學生印象,增強學生記憶,收到了較好的教學效果[1];另一方面也提醒教師,隨著學生理解、接受、掌握知識能力的提高,題庫中的題目可能偏于容易,需要進一步對原有的試題庫進行更新替換。三個年級的成績頻數均呈負偏態分布,計算偏態值(sk)[9],sk=3(平均分-中位數)/標準偏差,2009級、2010級、2011級的偏態值分別為-0.3694、-0.3510、-0.7732。一般說來,只要偏態值指標-1

表4 2009-2011級口腔臨床藥物學各題型得分及失分情況

(二)試卷質量分析。

2009級、2010級、2011級的試卷難度(P)分別為0.82、0.84、0.87,均大于0.8;從各個題型來看,除2009級翻譯題和填空題、2010級單選題的難度小于0.8外,其余各個年級的其他試題難度均大于0.8。難度系數較高說明多數試題難度較小,造成整體試卷難度偏易,尤其是知識點集中在典型藥物掌握應用情況的簡答題和問答題,目前題庫試題較為直接,如直接詢問某類藥物的藥理作用、作用特點、用藥原則等,學生僅需考試前死記硬背就能取得較好成績,考試后可能就印象不深,需要進一步結合口腔疾病特點與實際病例更新試題,側重考察學生真正能夠自己分析問題、解決問題的整體能力。

2009級、2010級的試卷區分度(D)分別為0.18、0.19,2009級填空題、2010級簡答題的區分度均為0.18。-1≤D≤+1,區分度高的試題、試卷可將不同水平的學生區分開來,區分度低的將不能進行很好的鑒別,使水平高和水平低的學生得分差不多,D對于選拔性考試更為更要。對于檢查性考試,認為0.2≤D≤0.4表示區分性較好,2009、2010級的試卷整體區分度不理想。教研室針對區分度不佳的填空題和簡答題實行教學改革,填空題增加考察知識點的范圍,簡答題變換出題思路,初步調整后,2011級的試卷整體區分度提升至0.32,填空題、簡答題的區分度分別提升為0.30、0.37,其他類型試題的區分度亦都在0.3以上,區分性較好。

(三)題型分值分析。

2009級各型試題的得分高低為:問答題>簡答題>單選題>翻譯題>填空題,失分率較高的是填空題和翻譯題;2010級、2011級各型試題的得分高低順序一致,均為:翻譯題>簡答題>填空題>問答題>單選題,失分率最高的亦都是單選題。在各題型中,翻譯題、填空題和單選題屬于客觀性題目,主要考察教學大綱中要求的基本概念、基本原理等內容,主要集中于簡單基礎的記憶型知識,授課時大部分內容通過圖示、歸納、比較、總結等方式進行突出強調,學生只需認真聽講、及時復習,就能得到很好的鞏固,得分應該相對容易,但2009級翻譯題和填空題失分率卻是所有題型最高的,經查閱試卷發現主要表現在知識點掌握不牢、書寫錯誤、識記能力不夠等。分析原因,這可能與口腔臨床藥物學知識點較多且比較分散,需要記憶的藥物中英文名稱多且比較抽象,學生之前接觸得少,容易遺忘、混淆,提醒授課教師調整教學方法。簡答題和問答題屬于主觀性題目,主要考察學生對口腔臨床常用藥物的掌握應用能力,三個年級學生的平均得分率均在80%以上,高于記憶性的單選題。分析認為,教師在教學過程中對典型藥物通過圖示、比較、課堂提問、課后習題等方式講解得比較透徹,同時八年制學生自學能力普遍較強,學習效果較為理想。

通過分析八年制口腔醫學生口腔臨床藥物學三年來的考試成績及試卷,我們需要適當提高試題的難度,在保證“寬覆蓋、強基礎、重應用”的基礎上,擴大知識點的考察范圍,體現各層次的區分度。同時,對教師也提出了更高的要求,在教學過程中,要注重多種教授方式、教學方法的運用,提高學生的學習興趣;更要在每次考試后進行考試成績分析和試卷質量評價,以求查漏補缺,探索性開展閉卷筆試結合課堂成績、案例分析、綜述報道等的多種考核方式,真正體現學生掌握知識、分析問題、解決問題的能力。

[1]趙電紅,董美麗,韓 蕊,等.八年制口腔醫學專業口腔臨床藥物學教學的思考與建議[J].現代醫藥衛生,2014,30(4):616-618.

[2]石武祥,章麗娟,楊庭仕.大理學院2005級碩士研究生醫學統計學期末考試成績分析[J].現代預防醫學,2007,34(10):1835-1837.

[3]孫艷芹,李洪梅,熊 暉,等.病理學考試成績和試卷質量分析與評價[J].基礎醫學教育,2013,15(1):20-22.

[4]蔡毅媛,宋沈超,劉海燕,等.臨床醫學專業《預防醫學》課程試卷及考試成績分析[J].貴陽醫學院學報,2013,38(1):104-106.

[5]保宏翔.統計學方法在成績分析中的應用[J].中國高等醫學教育,2012(7):114-115.

[6]史宗道主編.口腔臨床藥物學[M].第4版.北京:人民衛生出版社,2012.

[7]王秀紅.利用統計軟件SPSS進行試卷質量分析[J].企業導報,2010(1):289-290.

[8]牛學敏.相關系數在試卷質量分析中的應用[J].考試研究,2007,3(4):64-70.

[9]張云松.綜合評價試卷質量分析方法[J].數理統計與管理,2009,28(2):232-236.

[10]劉敏鈺.運用SPSS、Excel進行試卷質量分析初探[J].陜西教育學院學報,2004,20(4):102-105.

G40-058.1?

A

1002-1701(2017)06-0067-03

2016-03

趙電紅,女,碩士,副主任藥師,研究方向:醫院藥學

2014年北京大學口腔醫學院教學改革資助項目(2014-PT-01)。

10.3969/j.issn.1002-1701.2017.06.034

猜你喜歡
區分度信度試卷
《廣東地區兒童中醫體質辨識量表》的信度和效度研究
作為數學教育研究質量分析的信度
圖形推理測量指標相關性考察*
平衡損失函數下具有時間效應和通脹因子的信度估計
Module5 A Trip Along the Three Gorges
Module5 Great People and Great Inventions of Ancient China
Module 4 Sandstorms in Asia
Module 1 Europe
淺觀一道題的“區分度”
利用垂直平分線的定義巧解題
91香蕉高清国产线观看免费-97夜夜澡人人爽人人喊a-99久久久无码国产精品9-国产亚洲日韩欧美综合