基于二階段對(duì)比學(xué)習(xí)的中文自動(dòng)文本摘要方法研究

打開文本圖片集

摘要：在中文自動(dòng)文本摘要中，暴露偏差是一個(gè)常見的現(xiàn)象。由于中文文本自動(dòng)摘要在序列到序列模型訓(xùn)練時(shí)解碼器每一個(gè)詞輸入都來(lái)自真實(shí)樣本，但是在測(cè)試時(shí)當(dāng)前輸入用的卻是上一個(gè)詞的輸出，導(dǎo)致預(yù)測(cè)詞在訓(xùn)練和測(cè)試時(shí)是從不同的分布中推斷出來(lái)的，而這種不一致將導(dǎo)致訓(xùn)練模型和測(cè)試模型直接的差異。本文提出了一個(gè)兩階段對(duì)比學(xué)習(xí)框架以實(shí)現(xiàn)面向中文文本的生成式摘要訓(xùn)練，同時(shí)從摘要模型的訓(xùn)練以及摘要評(píng)價(jià)的建模進(jìn)行對(duì)比學(xué)習(xí)。（剩余1229字）