欧美有码视频,欧美性xxxx在线播放,av电影在线地址,小早川怜子影音先锋在线观看

Open LLM Leaderboard
免費測試
Ai平臺模型

Open LLM Leaderboard

Open LLM Leaderboard 是最大的大模型和數據集社區 HuggingFace 推出的開源大模型排行榜單,基于 Eleuther AI Language Model Evaluation Harness(Eleuther AI語言模型評估框架)封裝。

標簽:

Open LLM Leaderboard 是最大的大模型和數據集社區 HuggingFace 推出的開源大模型排行榜單,基于 Eleuther AI Language Model Evaluation Harness(Eleuther AI語言模型評估框架)封裝。

由于社區在發布了大量的大型語言模型(LLM)和聊天機器人之后,往往伴隨著對其性能的夸大宣傳,很難過濾出開源社區取得的真正進展以及目前的最先進模型。因此,Hugging Face 使用 Eleuther AI語言模型評估框架對模型進行四個關鍵基準測試評估。這是一個統一的框架,用于在大量不同的評估任務上測試生成式語言模型。

Open LLM Leaderboard 的評估基準

  • AI2 推理挑戰(25-shot):一組小學科學問題
  • HellaSwag(10-shot):一個測試常識推理的任務,對人類來說很容易(大約95%),但對SOTA模型來說具有挑戰性。
  • MMLU(5-shot)- 用于測量文本模型的多任務準確性。測試涵蓋57個任務,包括基本數學、美國歷史、計算機科學、法律等等。
  • TruthfulQA(0-shot)- 用于測量模型復制在在線常見虛假信息中的傾向性。

相關網站

主站蜘蛛池模板: 佛冈县| 河东区| 海门市| 诏安县| 鹤庆县| 阳高县| 玛多县| 沙雅县| 黄冈市| 瓮安县| 怀宁县| 商水县| 娱乐| 正宁县| 蓬莱市| 瓮安县| 巴林左旗| 迁西县| 玉山县| 西畴县| 界首市| 基隆市| 定襄县| 溆浦县| 卫辉市| 汾阳市| 科技| 昂仁县| 左贡县| 定日县| 防城港市| 石河子市| 密山市| 桐乡市| 玉田县| 株洲市| 江阴市| 本溪| 海晏县| 封丘县| 枣强县|