結(jié)合先驗(yàn)知識及注意力機(jī)制的生物醫(yī)學(xué)實(shí)體識別和關(guān)系抽取
【文章頁數(shù)】:72 頁
【學(xué)位級別】:碩士
【部分圖文】:
圖1-1位置編碼示意圖
華南理工大學(xué)碩士學(xué)位論文6導(dǎo)致從同一個句子中拆分出來的樣例,除了目標(biāo)藥物對的位置不同之外,其余部分都是相同的。因此會在句子中加入距離編碼信息,來增加樣例的區(qū)分度。距離編碼向量通常有兩個,分別對應(yīng)兩個藥物,一般定義為P1=index()index(1)和P2=index()inde....
圖2-1CNN-DNN模型結(jié)構(gòu)圖[24]
華南理工大學(xué)碩士學(xué)位論文14CNN-DNN模型CNN-DNN模型是早期用于命名實(shí)體識別的神經(jīng)網(wǎng)絡(luò)模型,先通過其他一些方式訓(xùn)練得到詞向量,用CNN網(wǎng)絡(luò)對句子做卷積,提取詞語的鄰居信息,再用DNN網(wǎng)絡(luò)進(jìn)一步提取信息,最終輸入到softmax或者CRF網(wǎng)絡(luò)得到標(biāo)簽序列。CNN-DNN模....
圖2-2BiLSTM-CRF模型結(jié)構(gòu)圖
第二章相關(guān)理論和技術(shù)15在CNN-DNN模型中,主要通過CNN網(wǎng)絡(luò)的卷積池化操作提取詞語窗口內(nèi)的鄰居信息,難以處理詞語的長依賴問題,而且模型單向地處理句子,只能獲得詞語的前文信息。Huang等人[25]提出了BiLSTM-CRF模型,模型通過雙向的LSTM網(wǎng)絡(luò)同時提取詞的上下文信....
圖2-3LSTM網(wǎng)絡(luò)結(jié)構(gòu)圖
第二章相關(guān)理論和技術(shù)15在CNN-DNN模型中,主要通過CNN網(wǎng)絡(luò)的卷積池化操作提取詞語窗口內(nèi)的鄰居信息,難以處理詞語的長依賴問題,而且模型單向地處理句子,只能獲得詞語的前文信息。Huang等人[25]提出了BiLSTM-CRF模型,模型通過雙向的LSTM網(wǎng)絡(luò)同時提取詞的上下文信....
本文編號:4031047
本文鏈接:http://www.wukwdryxk.cn/yixuelunwen/swyx/4031047.html