SuperCLUE

SuperCLUE是中文通用大模型綜合性評測基準。

2023年5月9日,SuperCLUE正式發布。

基本介紹

  • 中文名:中文通用大模型綜合性評測基準
  • 外文名:Fake superGLUE
  • 別名:superCLUE
發展歷史,主要作用,

發展歷史

2023年5月9日,中文通用大模型綜合性評測基準SuperCLUE正式發布。

主要作用

主要回答的問題是:在當前通用大模型大力發展的情況下,中文大模型的效果情況。包括但不限於:這些模型不同任務的效果情況、相較於國際上的代表性模型做到了什麼程度、 這些模型與人類的效果對比。
SuperCLUE從三個不同的維度評價模型的能力:基礎能力、專業能力和中文特性能力。其中專業能力包括中學、大學與專業考試,涵蓋了從數學、物理、地理到社會科學等50多項能力。

相關詞條

熱門詞條

聯絡我們