MMLU
57の科目（数学・歴史・法律・医学など）の多肢選択問題で、大規模言語モデルの幅広い知識と推論の能力を測るベンチマークとして、最も適切なものを1つ選べ。
- A
ImageNet
- B
MNIST
- C
ILSVRC
- D
MMLU
正解と解説を見る
正解：D
MMLUは、さまざまな分野の多肢選択問題で、言語モデルの知識を測る。ただし、ベンチマークの問題が、学習データに混入（汚染）している可能性にも注意する。
- A
誤り。画像認識のデータセット。
- B
誤り。手書き数字のデータセット。
- C
誤り。画像認識のコンテスト。
- D
正しい。モデルの総合的な性能の比較に、よく使われる。
このサイトの問題は、各試験の公開されているシラバスに沿って作ったオリジナルの模擬問題です。本試験の問題ではありません。日本ディープラーニング協会（JDLA）・一般社団法人生成AI活用普及協会（GUGA）の公式サービスではありません。