合作解決問題能力測(cè)評(píng)及其實(shí)踐
發(fā)布時(shí)間:2021-06-14 07:52
合作解決問題能力是在學(xué)術(shù)以及職場(chǎng)取得成功的一項(xiàng)重要能力。探討對(duì)合作解決問題能力進(jìn)行標(biāo)準(zhǔn)化測(cè)評(píng)所面臨的挑戰(zhàn)以及測(cè)評(píng)設(shè)計(jì)的一般思路和分析方法。作為這方面實(shí)證研究的例子,介紹美國教育考試服務(wù)中心(ETS)深度參與的PISA2015關(guān)于合作解決問題能力的測(cè)評(píng)以及ETS自身在測(cè)評(píng)合作解決問題能力方面的一些大規(guī)模實(shí)證研究。
【文章來源】:中國考試. 2019,(09)CSSCI
【文章頁數(shù)】:12 頁
【部分圖文】:
PISA2015合作解決問題能力測(cè)試的界面2.3PISA2015合作解決問題能力測(cè)試的評(píng)分
號(hào)對(duì)話節(jié)點(diǎn)時(shí),學(xué)生獲取同等量的信息。這種“救援”結(jié)構(gòu)給評(píng)分帶來困難,在第2題中答對(duì)的學(xué)生并沒有機(jī)會(huì)回答第3題,而答錯(cuò)的學(xué)生則有機(jī)會(huì)多答1道題,這導(dǎo)致2道題目的關(guān)聯(lián)度有可能出現(xiàn)負(fù)數(shù)。針對(duì)這種情況,將第2題和第3題合并采取多元計(jì)分的方法,即當(dāng)學(xué)生選擇第80號(hào)對(duì)話路徑時(shí),可以得2分;選擇第83號(hào)對(duì)話路徑(為第3題的正確選項(xiàng))可以得1分;選擇其他路徑得0分。圖1PISA2015合作解決問題能力測(cè)試的界面7778798081Item2Item384821308789858883圖2PISA2015合作解決問題試題設(shè)計(jì)中的“救援”結(jié)構(gòu)示例··16
l‐laborativeAssessmentandLearning,EPCAL)是ETS研發(fā)的一個(gè)用以支持大規(guī)模在線合作學(xué)習(xí)及測(cè)評(píng)的軟件基礎(chǔ)設(shè)施,該平臺(tái)不僅滿足前面提到的6點(diǎn)要求,而且還對(duì)測(cè)評(píng)任務(wù)進(jìn)行了模塊化管理[15]。一個(gè)非合作的測(cè)評(píng)任務(wù)在經(jīng)過簡(jiǎn)單的調(diào)整后,就可以部署到該平臺(tái)上成為一個(gè)合作任務(wù),從而大大提高了合作任務(wù)的研發(fā)效率,降低了研發(fā)成本。值得指出的是,該平臺(tái)的智能反饋系統(tǒng)也可以支持虛擬隊(duì)友,從而為大規(guī)模實(shí)施人機(jī)模式合作解決問題能力的測(cè)評(píng)奠定了基矗圖3為EPCAL的各個(gè)組成部分。除此之外,鑒于測(cè)評(píng)過程中會(huì)產(chǎn)生復(fù)雜的時(shí)序數(shù)據(jù),ETS還研發(fā)了配套的數(shù)據(jù)分析系統(tǒng)[16]以及基于自然語言處理的智能標(biāo)注系統(tǒng)[15,17]。這些基礎(chǔ)設(shè)施的研發(fā)為大規(guī)模的實(shí)證研究提供了有力的保障。3.3測(cè)評(píng)方法框架及測(cè)評(píng)原型合作解決問題能力是認(rèn)知能力和社交能力的綜合,這一特性使其更適合形成性測(cè)評(píng)(formativeassessment),而不是總結(jié)性測(cè)評(píng)(summativeassess‐ment)。因此,ETS關(guān)于合作解決問題能力的測(cè)評(píng)研究主要面向針對(duì)個(gè)人的形成性測(cè)評(píng)以及針對(duì)群體的測(cè)評(píng),而不是針對(duì)個(gè)人的總結(jié)性測(cè)評(píng)。基于此出發(fā)點(diǎn),我們提出了一個(gè)量化分析的評(píng)分策略,明確從3個(gè)方面提取量化的證據(jù)來支持合作解決問題能力的測(cè)評(píng)[18]:第一個(gè)方面是基于合作結(jié)果的量化證據(jù)。大部分的合作任務(wù),其結(jié)果都可以量化為成功或者失敗或者更詳細(xì)標(biāo)度的指標(biāo),因此對(duì)合作結(jié)果進(jìn)行量化相對(duì)比較容易。第二個(gè)方面是對(duì)合作過程進(jìn)行量化表征,具體而言就是把合作參與者的語合作任務(wù)管理用戶及團(tuán)隊(duì)管理系統(tǒng)設(shè)置進(jìn)程信息儀表盤管理模塊交互通信分析模塊數(shù)據(jù)模塊智能反饋模塊通信模塊任務(wù)模塊圖3ETS合作測(cè)評(píng)?
【參考文獻(xiàn)】:
期刊論文
[1]合作問題解決能力的測(cè)評(píng):PISA2015和ATC21S的測(cè)量原理透視[J]. 袁建林,劉紅云. 外國教育研究. 2016(12)
本文編號(hào):3229389
【文章來源】:中國考試. 2019,(09)CSSCI
【文章頁數(shù)】:12 頁
【部分圖文】:
PISA2015合作解決問題能力測(cè)試的界面2.3PISA2015合作解決問題能力測(cè)試的評(píng)分
號(hào)對(duì)話節(jié)點(diǎn)時(shí),學(xué)生獲取同等量的信息。這種“救援”結(jié)構(gòu)給評(píng)分帶來困難,在第2題中答對(duì)的學(xué)生并沒有機(jī)會(huì)回答第3題,而答錯(cuò)的學(xué)生則有機(jī)會(huì)多答1道題,這導(dǎo)致2道題目的關(guān)聯(lián)度有可能出現(xiàn)負(fù)數(shù)。針對(duì)這種情況,將第2題和第3題合并采取多元計(jì)分的方法,即當(dāng)學(xué)生選擇第80號(hào)對(duì)話路徑時(shí),可以得2分;選擇第83號(hào)對(duì)話路徑(為第3題的正確選項(xiàng))可以得1分;選擇其他路徑得0分。圖1PISA2015合作解決問題能力測(cè)試的界面7778798081Item2Item384821308789858883圖2PISA2015合作解決問題試題設(shè)計(jì)中的“救援”結(jié)構(gòu)示例··16
l‐laborativeAssessmentandLearning,EPCAL)是ETS研發(fā)的一個(gè)用以支持大規(guī)模在線合作學(xué)習(xí)及測(cè)評(píng)的軟件基礎(chǔ)設(shè)施,該平臺(tái)不僅滿足前面提到的6點(diǎn)要求,而且還對(duì)測(cè)評(píng)任務(wù)進(jìn)行了模塊化管理[15]。一個(gè)非合作的測(cè)評(píng)任務(wù)在經(jīng)過簡(jiǎn)單的調(diào)整后,就可以部署到該平臺(tái)上成為一個(gè)合作任務(wù),從而大大提高了合作任務(wù)的研發(fā)效率,降低了研發(fā)成本。值得指出的是,該平臺(tái)的智能反饋系統(tǒng)也可以支持虛擬隊(duì)友,從而為大規(guī)模實(shí)施人機(jī)模式合作解決問題能力的測(cè)評(píng)奠定了基矗圖3為EPCAL的各個(gè)組成部分。除此之外,鑒于測(cè)評(píng)過程中會(huì)產(chǎn)生復(fù)雜的時(shí)序數(shù)據(jù),ETS還研發(fā)了配套的數(shù)據(jù)分析系統(tǒng)[16]以及基于自然語言處理的智能標(biāo)注系統(tǒng)[15,17]。這些基礎(chǔ)設(shè)施的研發(fā)為大規(guī)模的實(shí)證研究提供了有力的保障。3.3測(cè)評(píng)方法框架及測(cè)評(píng)原型合作解決問題能力是認(rèn)知能力和社交能力的綜合,這一特性使其更適合形成性測(cè)評(píng)(formativeassessment),而不是總結(jié)性測(cè)評(píng)(summativeassess‐ment)。因此,ETS關(guān)于合作解決問題能力的測(cè)評(píng)研究主要面向針對(duì)個(gè)人的形成性測(cè)評(píng)以及針對(duì)群體的測(cè)評(píng),而不是針對(duì)個(gè)人的總結(jié)性測(cè)評(píng)。基于此出發(fā)點(diǎn),我們提出了一個(gè)量化分析的評(píng)分策略,明確從3個(gè)方面提取量化的證據(jù)來支持合作解決問題能力的測(cè)評(píng)[18]:第一個(gè)方面是基于合作結(jié)果的量化證據(jù)。大部分的合作任務(wù),其結(jié)果都可以量化為成功或者失敗或者更詳細(xì)標(biāo)度的指標(biāo),因此對(duì)合作結(jié)果進(jìn)行量化相對(duì)比較容易。第二個(gè)方面是對(duì)合作過程進(jìn)行量化表征,具體而言就是把合作參與者的語合作任務(wù)管理用戶及團(tuán)隊(duì)管理系統(tǒng)設(shè)置進(jìn)程信息儀表盤管理模塊交互通信分析模塊數(shù)據(jù)模塊智能反饋模塊通信模塊任務(wù)模塊圖3ETS合作測(cè)評(píng)?
【參考文獻(xiàn)】:
期刊論文
[1]合作問題解決能力的測(cè)評(píng):PISA2015和ATC21S的測(cè)量原理透視[J]. 袁建林,劉紅云. 外國教育研究. 2016(12)
本文編號(hào):3229389
本文鏈接:http://sikaile.net/jiaoyulunwen/jgkg/3229389.html
最近更新
教材專著