基于多模態(tài)對比融合的動作識別算法研究

打開文本圖片集

摘要：基于多模態(tài)數(shù)據(jù)的動作識別主要利用視覺、觸覺等多感官通道數(shù)據(jù)進(jìn)行人體姿態(tài)識別。由于不同模態(tài)數(shù)據(jù)的存儲結(jié)構(gòu)、采樣頻率差異性較大，多模態(tài)動作數(shù)據(jù)在特征提取過程中，容易出現(xiàn)語義偏移問題，影響了模型的識別效果。為解決上述問題，文章提出了基于多模態(tài)對比學(xué)習(xí)的動作識別模型（Multimodal Contrastive Fusion-based Action Recognition，MCFAR）。（剩余7678字）