面向小樣本命名實(shí)體識(shí)別的實(shí)體語(yǔ)義優(yōu)先提示學(xué)習(xí)方法

打開(kāi)文本圖片集

摘 要：

近些年來(lái)，提示學(xué)習(xí)在小樣本命名實(shí)體識(shí)別任務(wù)上得到了廣泛應(yīng)用。然而，命名實(shí)體識(shí)別仍然是一個(gè)令牌級(jí)的標(biāo)記任務(wù)，在通過(guò)提示模板調(diào)動(dòng)預(yù)訓(xùn)練知識(shí)時(shí)，很容易忽略新實(shí)體類(lèi)型的語(yǔ)義信息。為此，提出了一個(gè)語(yǔ)義優(yōu)先的提示學(xué)習(xí)方法。具體來(lái)說(shuō)，首先檢測(cè)少量示例中實(shí)體類(lèi)型蘊(yùn)涵的語(yǔ)義信息，然后將實(shí)體語(yǔ)義信息和詢問(wèn)實(shí)體位置的提示模板輸入模型中，利用模型中的非自回歸解碼器并行預(yù)測(cè)來(lái)提取實(shí)體；此外，為了確保語(yǔ)義信息與實(shí)體類(lèi)型的關(guān)聯(lián)性，使用對(duì)比學(xué)習(xí)的方法來(lái)訓(xùn)練一個(gè)分類(lèi)器，以去除與實(shí)體類(lèi)型無(wú)關(guān)的語(yǔ)義信息；最后在兩個(gè)常用的公共基準(zhǔn)數(shù)據(jù)集上評(píng)估了所提方法，實(shí)驗(yàn)結(jié)果證明了該方法的有效性。（剩余18903字）