機(jī)器閱讀理解是自然語言處理領(lǐng)域重要的研究方向,根據(jù)提供的文本數(shù)量,可以分為單文本閱讀理解模型和多本文閱讀理解模型,鑒于后者具有更高的挑戰(zhàn)性和實(shí)際應(yīng)用價值,本文專注于多文本閱讀理解模型在中文閱讀理解數(shù)據(jù)集的研究,模型的架構(gòu)包括段落選擇器和文本閱讀器。對于給定的問題、文檔和參考答案,首先,通過段落選擇器從文檔中選出與參考答案相關(guān)性較高的段落,然后,文本閱讀器在選擇的段落上完成閱讀工作,并預(yù)測出答案的范圍。針對段落選擇器和文本閱讀器的任務(wù),本文的主要研究工作包括:1、提出兩種基于卷積神經(jīng)網(wǎng)絡(luò)的段落選擇器,分別是二分類版本和多分類版本。兩種選擇器均將段落選擇轉(zhuǎn)化為分類的任務(wù),首先,預(yù)訓(xùn)練問題和段落中單詞的詞向量,然后,使用雙向長短時記憶網(wǎng)路分別對問題、段落中的上下文信息進(jìn)行編碼,接著,使用注意力機(jī)制層匹配問題和段落的語義信息,強(qiáng)調(diào)與問題相關(guān)性高的段落內(nèi)容。下一步,使用卷積神經(jīng)網(wǎng)絡(luò)提取段落中重要的特征,生成段落的特征向量。最后,二分類版選擇器使用段落特征向量預(yù)測段落包含答案的概率,選擇概率較高的段落;多分類版選擇器進(jìn)一步計(jì)算段落與問題的語義相似度,選擇相似度較高的段落。2、對于文本閱讀器任務(wù),實(shí)... 

【文章來源】：廈門大學(xué)福建省 211工程院校 985工程院校 教育部直屬院校

【文章頁數(shù)】：75 頁

【學(xué)位級別】：碩士

【部分圖文】：

圖２－２循環(huán)神經(jīng)網(wǎng)絡(luò)結(jié)構(gòu)圖??

圖２－３?ＬＳＴＭ網(wǎng)絡(luò)結(jié)構(gòu)１３５１??

圖２－５最大池化層??


本文編號：3137617