
客觀題作弊同判定標準研究
多選題作弊雷同的判斷和認定一直是困擾考試機構的一個難點,目前國內考試機構尚未確立科學有效的判定標準和方法。國家醫(yī)學考試中心自2001年開始客觀題作弊雷同判定標準研究,并從2003年開始在醫(yī)師資格考試中應用。
一、研究目的醫(yī)學教育網(wǎng) //m.348239.com
1、探討作弊雷同指標隨分數(shù)分布、題目樣本、考生樣本、選項類型等因素的變化規(guī)律。
2、嘗試建立作弊雷同判定標準的平均水平或常模。
二、研究過程與結論
1、概念界定
假設需要比較A考生和B考生的兩份試卷是否雷同,作答雷同的各項指標定義如下:
總選同數(shù):A卷和B卷選項相同的題數(shù);
總選同率:A卷和B卷選項相同的題數(shù)占總題數(shù)的比例;
對 同 數(shù):A卷和B卷都答對且選項相同的題目數(shù);
錯 同 數(shù):A卷和B卷都答錯且選項相同的題目數(shù);醫(yī)學教育網(wǎng) //m.348239.com
對同率A:A卷和B卷都答對且選項相同的題目數(shù)占A卷答對題數(shù)的比例;
錯同率A:A卷和B卷都答錯且選項相同的題目數(shù)占A卷答錯題數(shù)的比例;
對同率B:A卷和B卷都答對且選項相同的題目數(shù)占B卷答對題數(shù)的比例;
錯同率B:A卷和B卷都答錯且選項相同的題目數(shù)占B卷答錯題數(shù)的比例;
2、研究方法
以2001年全國醫(yī)學博士生英語入學考試和2001年醫(yī)師資格考試醫(yī)學綜合筆試臨床執(zhí)業(yè)醫(yī)師類別為研究對象,根據(jù)研究目標選取各類研究樣本,分別對樣本組內考生的作答情況進行兩兩比較,即每次從各組考生中任取2名不同的考生進行比較,兩兩比較的次數(shù)公式為:
3、結論醫(yī)學教育網(wǎng) //m.348239.com
研究結果表明,
(1)在無作弊行為的正常常規(guī)考場情況下,錯同率在在不同分數(shù)段具有一定穩(wěn)定性,且接近選項的隨機選擇率。
(2)錯同率與的穩(wěn)定性不受考生樣本、試題樣本、考場規(guī)模等因素的影響。
(3)四選項選擇題錯同率平均值的高限估計為0.27,錯同率的高限估計為0.70;五選項選擇題錯同率平均值的高限估計為0.24,錯同率的高限估計為0.54。
本研究建議,當兩個考生的雙向錯同率在統(tǒng)計學意義上顯著高于正??紙銎骄剑揖邆渥鞅椎目陀^條件時,考試機構可以認定其存在作弊行為。研究結果對于無直接證據(jù)下的多選題作弊判定具有參考和應用價值。醫(yī)學教育網(wǎng) //m.348239.com