漢語語用能力測試評分員效應(yīng)的實(shí)證研究
本文關(guān)鍵詞:漢語語用能力測試評分員效應(yīng)的實(shí)證研究 出處:《廣東外語外貿(mào)大學(xué)》2014年碩士論文 論文類型:學(xué)位論文
更多相關(guān)文章: 漢語語用能力 評分員效應(yīng) 評分員比較 多層面分析
【摘要】:本文主要通過控制評分員變量,研究評分員的評分員效應(yīng),包括整理嚴(yán)厲度差異、與評分標(biāo)準(zhǔn)的交互作用、集中趨勢以及與試題之間的交互作用,來探討不同變量評分員之間的評分行為差異。總共有6位評分員及30位受試參與了該研究。在6位評分員當(dāng)中,3位來自中國北方地區(qū),3位來自南方地區(qū),3位男性,3位女性。 研究結(jié)果顯示,6位評分員的內(nèi)部一致性信度都在可接受范圍之內(nèi),但評分員間嚴(yán)厲度差異較大,存在18個嚴(yán)厲度層級。由于牽涉到了社會變量,評分員顯示了較多且復(fù)雜的評分員---試題的交互作用。評分員組間也存在一定差異。其中,北方評分員相較于南方嚴(yán)厲,其中2位北方男評分員考察了考生的跨文化意識。對于陌生人,北方評分員相較南方評分員更為開放、熱情。男評分員比女評分員更有等級、尊卑以及權(quán)力意識。 本研究得出以下結(jié)論,,對于漢語語用能力測試而言,評分員之間存在較大的差異,主要體現(xiàn)在社會變量上,因此對于評分員細(xì)致,有針對性的培訓(xùn)對于提高語用能力測試的信度和效度有非常重要的意義。同時,此次研究證明了使用定量及定性分析相結(jié)合來研究評分員效應(yīng)的可行性,以多層面拉西模型的結(jié)果為依據(jù),以此進(jìn)行定性分析造成評分員效應(yīng)的因素,對于提高評分員培訓(xùn)效果也有實(shí)踐意義。
[Abstract]:This paper mainly studies the grader effect of the grader by controlling the variables of the grader, including finishing the severity difference, the interaction with the scoring standard, the concentration trend and the interaction between the grader and the test questions. A total of 6 raters and 30 participants participated in the study. Of the 6 raters, 3 were from northern China and 3 were from southern China. Three men and three women. The results showed that the internal consistency reliability of the six graders was within the acceptable range, but there was a large difference in severity among the graders, and there were 18 severity levels, because of the social variables involved. The raters showed the interaction of more and more complicated raters-questions. There were also some differences among the raters groups. Among them, the northern raters were more severe than the southern ones. Two northern male raters examined candidates' cross-cultural awareness. For strangers, northern graders were more open and enthusiastic than southern raters. Male graders were more rated than female raters. The sense of inferiority and power. This study draws the following conclusions, for the test of Chinese pragmatic competence, there is a great difference between the graders, mainly reflected in the social variables, so the graders are careful. Targeted training is of great significance in improving the reliability and validity of pragmatic competence testing. At the same time, this study has proved the feasibility of using quantitative and qualitative analysis to study the raters effect. On the basis of the results of the multi-level Rasi model, the qualitative analysis of the factors causing the effect of the grader is also of practical significance for the improvement of the training effect of the grader.
【學(xué)位授予單位】:廣東外語外貿(mào)大學(xué)
【學(xué)位級別】:碩士
【學(xué)位授予年份】:2014
【分類號】:H136
【相似文獻(xiàn)】
相關(guān)期刊論文 前10條
1 毛世花;陳曉麗;;E-rater和句酷的對比研究及對提高大學(xué)生英語作文水平的啟示[J];高等函授學(xué)報(哲學(xué)社會科學(xué)版);2012年05期
2 ;[J];;年期
3 ;[J];;年期
4 ;[J];;年期
5 ;[J];;年期
6 ;[J];;年期
7 ;[J];;年期
8 ;[J];;年期
9 ;[J];;年期
10 ;[J];;年期
相關(guān)會議論文 前1條
1 王躍;林向進(jìn);徐三中;;Quantitative Measures of Modic Changes in Lumbar Spine Magnetic Resonance Imaging[A];浙江省醫(yī)學(xué)會骨科學(xué)分會30年慶典暨2011年浙江省骨科學(xué)學(xué)術(shù)年會論文匯編[C];2011年
相關(guān)重要報紙文章 前1條
1 杜明;RATER指數(shù)衡量客戶滿意度的標(biāo)尺[N];中國企業(yè)報;2003年
相關(guān)碩士學(xué)位論文 前10條
1 張潔;用多層面Rasch模型分析做事測試的分?jǐn)?shù)差異[D];浙江大學(xué);2006年
2 謝麗君;語用能力測試中評卷人效應(yīng)的研究[D];廣東外語外貿(mào)大學(xué);2013年
3 周曼芝;寫作評分中評分員因素的多側(cè)面Rasch模型分析[D];湖南大學(xué);2007年
4 段然;基于多層面Rasch模型的CET-SET評分員效應(yīng)研究[D];河北科技大學(xué);2012年
5 郝靜茹;大學(xué)英語分級測試作文評分中評分員偏差特征分析[D];湖南大學(xué);2012年
6 師艷芹;大規(guī)模網(wǎng)上作文評分的信度研究[D];湖南大學(xué);2009年
7 陳文捷;漢語語用能力測試評分員效應(yīng)的實(shí)證研究[D];廣東外語外貿(mào)大學(xué);2014年
8 呂玲玲;大學(xué)英語口語機(jī)考三閱評分模式的可靠性研究[D];湖南大學(xué);2012年
9 盧偉烈;教師評分員與非教師評分員對口語故事復(fù)述評分的對比研究[D];廣東外語外貿(mào)大學(xué);2013年
10 王利國;以RATER指數(shù)框架分析唐山地稅系統(tǒng)納稅服務(wù)的改善[D];河北大學(xué);2010年
本文編號:1397373
本文鏈接:http://sikaile.net/wenyilunwen/hanyulw/1397373.html