【摘要】：本文介紹了對話系統(tǒng)的發(fā)展歷史以及隨著對話系統(tǒng)發(fā)展而衍生出的多種對話系統(tǒng)評價(jià)方法,從任務(wù)型對話系統(tǒng)與開放域?qū)υ捪到y(tǒng)兩個方向進(jìn)行了調(diào)研和總結(jié),分析了不同評價(jià)方法的利弊,每種評價(jià)方法的側(cè)重點(diǎn)和不同方向上最新的研究進(jìn)展.在任務(wù)型對話系統(tǒng)方面,介紹了Steve Young等人的近期研究成果,總結(jié)了幾種被廣泛使用的評價(jià)思路.在開放域?qū)υ捪到y(tǒng)方面,從客觀指標(biāo)評價(jià)和模擬人工評分兩個角度探索了開放域聊天系統(tǒng)的評價(jià)方法,對于不同的指標(biāo)和不同的研究思路做了分析及介紹.最后,本文通過總結(jié)及分析對話系統(tǒng)的經(jīng)典評價(jià)方法和當(dāng)前最新的基于神經(jīng)網(wǎng)絡(luò)模型的對話評價(jià)方法,對對話系統(tǒng)評價(jià)方法的發(fā)展趨勢進(jìn)行了展望.
[Abstract]:This paper introduces the development history of dialogue system and the evaluation methods of dialogue system derived from the development of dialogue system, and makes a survey and summary from two directions: task-based dialogue system and open domain dialogue system. The advantages and disadvantages of different evaluation methods, the emphasis of each evaluation method and the latest research progress in different directions are analyzed. In the aspect of task-based dialogue system, the recent research results of Steve Young et al are introduced, and several widely used evaluation ideas are summarized. In the aspect of open domain dialogue system, this paper probes into the evaluation method of open domain chat system from two angles of objective index evaluation and simulated artificial score, and analyzes and introduces different indexes and different research ideas. Finally, through summarizing and analyzing the classical evaluation method of dialogue system and the latest dialogue evaluation method based on neural network model, the development trend of dialogue system evaluation method is prospected in this paper.
【作者單位】： 哈爾濱工業(yè)大學(xué)社會計(jì)算與信息檢索研究中心;
【基金】：國家重點(diǎn)基礎(chǔ)研究發(fā)展計(jì)劃(批準(zhǔn)號:2014CB340503) 國家自然科學(xué)基金(批準(zhǔn)號:61502120,61472105)資助項(xiàng)目
【分類號】：TP18;TP391.1

【相似文獻(xiàn)】

相關(guān)期刊論文 前3條

1 劉智博;Michael Brasser;鄭方;徐明星;;一個基于文本輸入的口語對話系統(tǒng)的新的實(shí)現(xiàn)策略[J];計(jì)算機(jī)科學(xué);2006年11期

2 王彬,江銘虎;口語對話系統(tǒng)中的語句主題提取[J];計(jì)算機(jī)工程與應(yīng)用;2004年18期

3 汪志鴻;張海云;陳柯;杜利民;;語音瀏覽器的概念、框架和應(yīng)用[J];微計(jì)算機(jī)應(yīng)用;2007年10期

相關(guān)會議論文 前2條

1 郭榮;高峰;毛家菊;陸汝占;;人機(jī)口語對話系統(tǒng)中否定結(jié)構(gòu)的處理[A];語言計(jì)算與基于內(nèi)容的文本處理——全國第七屆計(jì)算語言學(xué)聯(lián)合學(xué)術(shù)會議論文集[C];2003年

2 沈揚(yáng);袁保宗;李紅蓮;何偉;;口語火車查詢和定票系統(tǒng)性能的評測[A];第七屆全國人機(jī)語音通訊學(xué)術(shù)會議（NCMMSC7）論文集[C];2003年

相關(guān)碩士學(xué)位論文 前4條

1 喻銀尤;基于安卓校園服務(wù)對話系統(tǒng)的設(shè)計(jì)與開發(fā)[D];復(fù)旦大學(xué);2013年

2 范雄雄;面向?qū)Ш降闹悄軐υ捪到y(tǒng)[D];復(fù)旦大學(xué);2013年

3 吳婷婷;旅游信息口語對話系統(tǒng)[D];北京林業(yè)大學(xué);2015年

4 李靜靜;導(dǎo)游對話系統(tǒng)的相關(guān)技術(shù)研究[D];哈爾濱工業(yè)大學(xué);2014年

，

本文編號：2204411