基于圖嵌入的理財(cái)產(chǎn)品推薦
【文章頁(yè)數(shù)】:50 頁(yè)
【學(xué)位級(jí)別】:碩士
【部分圖文】:
圖2.1CBOW
CBOW使用窗口中的上下文單詞來(lái)預(yù)測(cè)中心詞,模型結(jié)構(gòu)如下:其中,C表示窗口大小,V表示單詞的總個(gè)數(shù),N是學(xué)習(xí)后的單詞向量的維度,W表示輸入層的參數(shù)矩陣,其維度為V*N,W’表示輸出層的參數(shù)矩陣,其維度為N*V。
圖2.2Skip-gram
Skip-gram和CBOW在模型構(gòu)建上?分相似,都是相關(guān)詞來(lái)預(yù)測(cè)其他詞,只是變成了由中心詞來(lái)預(yù)測(cè)上下文詞,具體模型結(jié)構(gòu)如下:其損失函數(shù)為
圖2.3GNN的種類
根據(jù)不同的聚合函數(shù)的定義,GNN也分為不同的模型種類,如圖所示:其中,比較出名的有圖卷積神經(jīng)網(wǎng)絡(luò)(GCN)、圖注意力神經(jīng)網(wǎng)絡(luò)(GAN)、門控圖神經(jīng)網(wǎng)絡(luò)(GGNN)等等。由于本文所使用的模型包含門控圖神經(jīng)網(wǎng)絡(luò),所以在此對(duì)門控圖神經(jīng)網(wǎng)絡(luò)進(jìn)行介紹。
圖2.4連接矩陣
按照第一個(gè)公式,節(jié)點(diǎn)v首先從其鄰接節(jié)點(diǎn)匯集信息,其中,A是由出度矩陣和入度矩陣按行拼接得到的連接矩陣,以下圖為例:依據(jù)圖中每個(gè)節(jié)點(diǎn)的入度和出度,得到連接矩陣,該矩陣描述了節(jié)點(diǎn)與鄰接節(jié)點(diǎn)之間的關(guān)系,考慮了信息的雙向傳遞。然后就是類似GRU節(jié)點(diǎn)更新方法,結(jié)合節(jié)點(diǎn)前一個(gè)時(shí)刻與該節(jié)點(diǎn)的鄰....
本文編號(hào):3953830
本文鏈接:http://sikaile.net/jingjilunwen/hongguanjingjilunwen/3953830.html