最終更新:2025-01-23 (木) 08:00:27 (15d)  

GPQA
Top / GPQA

Graduate-Level Google-Proof Q&A Benchmark

メモ

  • Google検索をしても正解が検証できない高い難易度

内容

  • 生物学物理学化学の問題データセット
  • 専門家が作成した448問
  • 複数選択式
  • 非常に困難かつ高品質
  • 関連分野の博士または博士取得予定者の正解率は65%
  • 非専門家の検証者の正解率は34%

参考