大規(guī)模多任務(wù)中文理解能力測(cè)試

打開(kāi)文本圖片集

關(guān)鍵詞：中文大模型;多任務(wù)評(píng)測(cè);zero-shot;few-shot;垂直領(lǐng)域任務(wù)

0引言

隨著ChatGPT[1]等大模型的驚艷亮相，ChatGLM[2]、MOSS[3]、文心一言、通義千問(wèn)、商量等具備中文能力的大模型也相繼發(fā)布。雖然針對(duì)英文大語(yǔ)言模型已有較為完善的評(píng)測(cè)方式（如MMLU[4]），但目前仍缺乏針對(duì)中文大語(yǔ)言模型的評(píng)測(cè)方法。（剩余5913字）