面向垂直領(lǐng)域的智能問答增強(qiáng)系統(tǒng)的研究與實(shí)現(xiàn)
發(fā)布時間:2020-12-09 01:09
由于人工智能技術(shù)的發(fā)展以及自然語言處理技術(shù)的成熟,自然語言處理技術(shù)已經(jīng)派生出了很多應(yīng)用,其中最常見的是智能問答系統(tǒng)。智能問答系統(tǒng)已經(jīng)成功地應(yīng)用到企業(yè)中幫助企業(yè)形成智能化問答解決方案。智能問答系統(tǒng)允許用戶以可理解的自然語言與系統(tǒng)進(jìn)行對話,系統(tǒng)根據(jù)用戶輸入的語言信息進(jìn)行處理,給出符合用戶需要的答案。在智能問答系統(tǒng)中核心的就是對用戶語言的理解以及處理,這部分是一個長期優(yōu)化的過程。本文主要是在公司已有的智能問答系統(tǒng)基礎(chǔ)上,對智能問答對話模塊進(jìn)行基于知識庫的增強(qiáng)優(yōu)化,使用自然語言處理相關(guān)技術(shù)提升問答對話的效果,提升知識點(diǎn)的召回率以及模型的準(zhǔn)確率。本文分為以下三部分:1.設(shè)計(jì)基于知識庫的智能問答對話的效果優(yōu)化功能點(diǎn)。問答對話模塊的基礎(chǔ)是從原始語料信息中生成知識點(diǎn)并添加到知識庫,為每個知識點(diǎn)配置相應(yīng)的答案信息完成自動應(yīng)答。在原有問答的基礎(chǔ)上,針對目前存在的問題,影響智能問答對話效果的因素設(shè)計(jì)相應(yīng)的功能,影響問答效果的因素在于用戶的語言信息是復(fù)雜多樣的,對于相同語義不同形式的語義表達(dá)如何泛化,提升問答的準(zhǔn)確率是本文要解決的問題。常見的問題是知識點(diǎn)相似問錯放以及知識點(diǎn)混淆的問題。通過計(jì)算知識點(diǎn)之間的文本...
【文章來源】:山東大學(xué)山東省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:127 頁
【學(xué)位級別】:碩士
【部分圖文】:
圖2-1智能問答增強(qiáng)系統(tǒng)功能框架圖??
?1.包含多個知識成????"禮??^?iRjftsil??(*?識別準(zhǔn)嫌軍間???公《??^*費(fèi)/?分》素??ft?fi怎么》.#??『????找^公《?用??請料|??成功振解?怎么糾《??水的濃*.???時W??ttW.?卜典我的tt籌*iJJPatm?npj??小嫌會水就嚴(yán)棗??■???煽鱗ft找和遍《???5個供矜蚵MR??從A淡ft未和花謀談薅?-汀叫??AAW荇水妨仆么??你V.擇%續(xù)《和0:常的 ̄水“味1<明??遍和?仆么?KfS??圖2-3線上query分析圖??(1)query表達(dá)的意圖相同,句子中實(shí)體順序,句子結(jié)構(gòu)不同.??(2)對于機(jī)器人無法回復(fù)的用戶query需要增加相似問題的學(xué)習(xí).??(3)對于用戶queiy包含多意圖情況時需要關(guān)聯(lián)相關(guān)知識點(diǎn)回復(fù).??(4)針對query召回的知識點(diǎn)置信度分?jǐn)?shù)一樣時,需要增加實(shí)體標(biāo)簽來改變??句子權(quán)重信息.??(5)知識庫測評是衡量知識庫整體使用效果的一個綜合體系,可以評價知識??庫的整體使用情況,建立完整的評價指標(biāo)體系,針對知識庫中常見的三類問題:??相似知識點(diǎn)易混淆、相似問數(shù)量多、相似問錯放建立評價指標(biāo),并提供解決問??題的方案.??(6)知識庫的數(shù)據(jù)使用情況建立數(shù)據(jù)分析指標(biāo)進(jìn)行數(shù)據(jù)分析.??通過以上需求分析內(nèi)容,可以將問答對話知識庫優(yōu)化劃分為:知識點(diǎn)相似??問的學(xué)習(xí),建立知識點(diǎn)關(guān)鍵詞匹配規(guī)則,知識點(diǎn)的關(guān)聯(lián)推薦,問答數(shù)據(jù)分析,??知識庫測評.??2.3.1.1知識點(diǎn)相似問學(xué)習(xí)??知識點(diǎn)相似問題的學(xué)習(xí)是為了知識庫中的知識點(diǎn)增加相似問,提高知識點(diǎn)??的泛化能力。知識點(diǎn)相似問學(xué)習(xí)解決的問題是機(jī)器人無法回答的用戶問題可以?
■?山東大學(xué)碩士學(xué)位論文???(1)支持導(dǎo)入待審核問題,導(dǎo)人上限為10萬語料,導(dǎo)人之后系統(tǒng)應(yīng)過濾掉??不符合規(guī)則的臟數(shù)據(jù)。??(2)導(dǎo)入的問題可以按語料中的問題或者知識庫中的知識點(diǎn)兩種形式查??看。每個問題將會顯示3個置信度最高的知識點(diǎn)作為推薦知識點(diǎn)?梢赃x擇是??否合并到該知識點(diǎn)。??(3)支持按照時間范圍,相似問分?jǐn)?shù),推薦知識點(diǎn)進(jìn)行知識點(diǎn)的篩選捜索。??^?'-N???,?,??^????*??—導(dǎo)人一+?篩選語料?——>?將語料與知i只點(diǎn)fcb對??語料庫???Y???返回每個問題的top3知??識點(diǎn)???Y???選擇對應(yīng)的知識點(diǎn)合并??圖24相似問需求分析示意圖??2.3.1.2知識點(diǎn)關(guān)鍵詞匹配規(guī)則??關(guān)鍵詞匹配規(guī)則是預(yù)先將關(guān)鍵詞與知識庫中的知識點(diǎn)-答案對建立聯(lián)系,一??旦檢索到用戶的問題中包含關(guān)鍵詞,便可以縮小匹配范圍,提高問答效率。通??過關(guān)鍵詞規(guī)則實(shí)現(xiàn)自動問答的邏輯是,平臺對用戶消息中出現(xiàn)的關(guān)鍵詞進(jìn)行字??符匹配,如果匹配成功,機(jī)器人回復(fù)這個規(guī)則對應(yīng)的答案。可以快速實(shí)現(xiàn)業(yè)務(wù)??簡單固定的單輪對話場景,比如當(dāng)用戶說“紅包”時,機(jī)器人返回?fù)尲t包的頁面??鏈接。??關(guān)鍵詞匹配規(guī)則的功能性需求包括:??(1)支持關(guān)鍵詞規(guī)則的增、刪、改、查等基本的人庫操作。??(2)支持關(guān)鍵詞規(guī)則的批量上傳下載,導(dǎo)人導(dǎo)出。??(3)支持關(guān)鍵詞規(guī)則的編輯設(shè)置。包括設(shè)置觸發(fā)條件,回復(fù)內(nèi)容。關(guān)鍵詞??支持包含等于兩種形式。??12??
本文編號:2905992
【文章來源】:山東大學(xué)山東省 211工程院校 985工程院校 教育部直屬院校
【文章頁數(shù)】:127 頁
【學(xué)位級別】:碩士
【部分圖文】:
圖2-1智能問答增強(qiáng)系統(tǒng)功能框架圖??
?1.包含多個知識成????"禮??^?iRjftsil??(*?識別準(zhǔn)嫌軍間???公《??^*費(fèi)/?分》素??ft?fi怎么》.#??『????找^公《?用??請料|??成功振解?怎么糾《??水的濃*.???時W??ttW.?卜典我的tt籌*iJJPatm?npj??小嫌會水就嚴(yán)棗??■???煽鱗ft找和遍《???5個供矜蚵MR??從A淡ft未和花謀談薅?-汀叫??AAW荇水妨仆么??你V.擇%續(xù)《和0:常的 ̄水“味1<明??遍和?仆么?KfS??圖2-3線上query分析圖??(1)query表達(dá)的意圖相同,句子中實(shí)體順序,句子結(jié)構(gòu)不同.??(2)對于機(jī)器人無法回復(fù)的用戶query需要增加相似問題的學(xué)習(xí).??(3)對于用戶queiy包含多意圖情況時需要關(guān)聯(lián)相關(guān)知識點(diǎn)回復(fù).??(4)針對query召回的知識點(diǎn)置信度分?jǐn)?shù)一樣時,需要增加實(shí)體標(biāo)簽來改變??句子權(quán)重信息.??(5)知識庫測評是衡量知識庫整體使用效果的一個綜合體系,可以評價知識??庫的整體使用情況,建立完整的評價指標(biāo)體系,針對知識庫中常見的三類問題:??相似知識點(diǎn)易混淆、相似問數(shù)量多、相似問錯放建立評價指標(biāo),并提供解決問??題的方案.??(6)知識庫的數(shù)據(jù)使用情況建立數(shù)據(jù)分析指標(biāo)進(jìn)行數(shù)據(jù)分析.??通過以上需求分析內(nèi)容,可以將問答對話知識庫優(yōu)化劃分為:知識點(diǎn)相似??問的學(xué)習(xí),建立知識點(diǎn)關(guān)鍵詞匹配規(guī)則,知識點(diǎn)的關(guān)聯(lián)推薦,問答數(shù)據(jù)分析,??知識庫測評.??2.3.1.1知識點(diǎn)相似問學(xué)習(xí)??知識點(diǎn)相似問題的學(xué)習(xí)是為了知識庫中的知識點(diǎn)增加相似問,提高知識點(diǎn)??的泛化能力。知識點(diǎn)相似問學(xué)習(xí)解決的問題是機(jī)器人無法回答的用戶問題可以?
■?山東大學(xué)碩士學(xué)位論文???(1)支持導(dǎo)入待審核問題,導(dǎo)人上限為10萬語料,導(dǎo)人之后系統(tǒng)應(yīng)過濾掉??不符合規(guī)則的臟數(shù)據(jù)。??(2)導(dǎo)入的問題可以按語料中的問題或者知識庫中的知識點(diǎn)兩種形式查??看。每個問題將會顯示3個置信度最高的知識點(diǎn)作為推薦知識點(diǎn)?梢赃x擇是??否合并到該知識點(diǎn)。??(3)支持按照時間范圍,相似問分?jǐn)?shù),推薦知識點(diǎn)進(jìn)行知識點(diǎn)的篩選捜索。??^?'-N???,?,??^????*??—導(dǎo)人一+?篩選語料?——>?將語料與知i只點(diǎn)fcb對??語料庫???Y???返回每個問題的top3知??識點(diǎn)???Y???選擇對應(yīng)的知識點(diǎn)合并??圖24相似問需求分析示意圖??2.3.1.2知識點(diǎn)關(guān)鍵詞匹配規(guī)則??關(guān)鍵詞匹配規(guī)則是預(yù)先將關(guān)鍵詞與知識庫中的知識點(diǎn)-答案對建立聯(lián)系,一??旦檢索到用戶的問題中包含關(guān)鍵詞,便可以縮小匹配范圍,提高問答效率。通??過關(guān)鍵詞規(guī)則實(shí)現(xiàn)自動問答的邏輯是,平臺對用戶消息中出現(xiàn)的關(guān)鍵詞進(jìn)行字??符匹配,如果匹配成功,機(jī)器人回復(fù)這個規(guī)則對應(yīng)的答案。可以快速實(shí)現(xiàn)業(yè)務(wù)??簡單固定的單輪對話場景,比如當(dāng)用戶說“紅包”時,機(jī)器人返回?fù)尲t包的頁面??鏈接。??關(guān)鍵詞匹配規(guī)則的功能性需求包括:??(1)支持關(guān)鍵詞規(guī)則的增、刪、改、查等基本的人庫操作。??(2)支持關(guān)鍵詞規(guī)則的批量上傳下載,導(dǎo)人導(dǎo)出。??(3)支持關(guān)鍵詞規(guī)則的編輯設(shè)置。包括設(shè)置觸發(fā)條件,回復(fù)內(nèi)容。關(guān)鍵詞??支持包含等于兩種形式。??12??
本文編號:2905992
本文鏈接:http://sikaile.net/shoufeilunwen/xixikjs/2905992.html
最近更新
教材專著