類別條件生成對(duì)抗網(wǎng)絡(luò)的語(yǔ)音對(duì)抗樣本生成方法

打開(kāi)文本圖片集

摘要：針對(duì)現(xiàn)有面向自動(dòng)語(yǔ)音識(shí)別系統(tǒng)的對(duì)抗攻擊方法難以捕捉不同語(yǔ)音尺度之間的相關(guān)性、導(dǎo)致攻擊成功率低的問(wèn)題，提出一種類別條件生成對(duì)抗網(wǎng)絡(luò)的語(yǔ)音對(duì)抗樣本生成方法。通過(guò)目標(biāo)標(biāo)簽映射模塊，將攻擊目標(biāo)標(biāo)簽轉(zhuǎn)化為獨(dú)熱向量，作為條件輸入到構(gòu)建的類別條件生成對(duì)抗網(wǎng)絡(luò)中，以此控制語(yǔ)音樣本類別的生成。該類別條件生成對(duì)抗網(wǎng)絡(luò)中的生成器，采用設(shè)計(jì)的NReSidual U-block 網(wǎng)絡(luò)模塊與U-Net相融合，可以更好地學(xué)習(xí)不同時(shí)間尺度的語(yǔ)音特征，以及提升語(yǔ)音特征的表示能力，從而可以針對(duì)特定語(yǔ)音類別生成對(duì)抗樣本；判別器采用卷積塊和全連接層相結(jié)合的網(wǎng)絡(luò)結(jié)構(gòu)，將錯(cuò)誤損失通過(guò)梯度反向傳播至生成器，能有效保留語(yǔ)音信號(hào)的時(shí)序信息，并解決數(shù)據(jù)分布不穩(wěn)定問(wèn)題。（剩余20173字）