甄別答案抄襲的kappa2.0方法及與其它方法的比較
發(fā)布時間:2017-05-12 18:12
本文關鍵詞:甄別答案抄襲的kappa2.0方法及與其它方法的比較,,由筆耕文化傳播整理發(fā)布。
【摘要】: 抄襲現(xiàn)象的存在對考試信度、效度以及考試的公平性和信譽都產生了很大的影響。從20世紀20年代起測量學界就提出了多種甄別答案抄襲的方法,包括g_2、K指數、ω及錯同率方法等。Sotaridona等(2006)提出用kappa統(tǒng)計量(本研究中將其稱為kappa1.0方法)甄別答案抄襲,研究表明其統(tǒng)計性能良好,但這種方法本身存在著缺陷。例如,把選項重新標記到一個4個等級的順序量表上,無法刻畫選項之間的差距有多大。 針對kappa1.0方法的缺陷,本研究提出了一種新的甄別答案抄襲的方法:kappa2.0方法。這種方法充分考察了成對考生作答的一致性,它把順序量表細化為10個等級,使得各等級間具有了一定的可比性;并且在假設檢驗時,利用了所有考生kappa值的經驗分布,降低了Ⅰ型錯誤率。 此外,本研究設計了不同被抄襲者水平、不同抄襲人數、不同抄襲面積、不同臨界水平共64種實驗條件,對kappa1.0方法、kappa2.0方法、錯同率方法以及g_2方法進行了比較研究。結果表明,kappa2.0的統(tǒng)計性能不僅優(yōu)于kappa1.0方法,而且大部分條件下還優(yōu)于g_2方法和錯同率方法。在抄襲人數較多、抄襲面積較大時,統(tǒng)計性能最好,Ⅰ型錯誤率低于理論臨界水平,且甄別率較高。對每種方法來講,臨界水平對Ⅰ型錯誤率和甄別率影響最大,當臨界水平降低時,Ⅰ型錯誤率減小,甄別率降低;抄襲人數和抄襲面積對其也有影響,一般來講,抄襲人數多、題數多時,Ⅰ型錯誤率小,甄別率高;被抄襲者水平對其影響不大。 Kappa1.0方法2008年已經應用到實際考試中;趉appa1.0之上的kappa2.0方法性能得到優(yōu)化,相信在今后的實際應用中能發(fā)揮更大的作用。
【關鍵詞】:kappa1.0 kappa2.0 I型錯誤率 甄別率
【學位授予單位】:北京語言大學
【學位級別】:碩士
【學位授予年份】:2009
【分類號】:G424.74
【目錄】:
- 摘要3-4
- Abstract4-6
- 第一部分 引言6-8
- 1.1 選題及研究價值6-7
- 1.1.1 甄別答案抄襲的重要性6
- 1.1.2 kappa統(tǒng)計量的研究價值6-7
- 1.2 研究目的7-8
- 第二部分 文獻綜述8-19
- 2.1 甄別答案抄襲的方法回顧8-16
- 2.1.1 甄別答案抄襲的各種方法8-13
- 2.1.2 檢驗甄別方法性能的兩個指標13-14
- 2.1.3 各種甄別方法的比較研究14-16
- 2.2 kappa統(tǒng)計量16-19
- 2.2.1 kappa統(tǒng)計量的介紹16-17
- 2.2.2 用于甄別答案抄襲的kappa1.0方法17-19
- 第三部分 實證研究19-38
- 3.1 研究方法19-24
- 3.1.1 kappa1.0方法的優(yōu)缺點19-20
- 3.1.2 新的kappa方法—kappa2.020-24
- 3.2 研究過程24-29
- 3.2.1 數據準備24-25
- 3.2.2 研究設計25-29
- 3.3 結果與分析29-36
- 3.3.1 研究結果29-34
- 3.3.2 結果分析34-36
- 3.4 不足之處與進一步研究的方向36-38
- 第四部分 結論38-39
- 參考文獻39-42
- 致謝42
【參考文獻】
中國期刊全文數據庫 前5條
1 劉景玉;肖立宏;;甄別多項選擇題考試中答案抄襲的不同方法的比較[J];考試研究;2008年03期
2 蘇炳華,史秉璋,熊宗t
本文編號:360495
本文鏈接:http://sikaile.net/jiaoyulunwen/jiaoxuetheo/360495.html