MMLU（読み）エムエムエルユー（その他表記）MMLU

デジタル大辞泉

エム‐エム‐エル‐ユー【MMLU】［massive multitask language understanding］

《massive multitask language understanding》人工知能の大規模言語モデルの能力を評価するベンチマークテストの一。さまざまな難易度の四択問題で構成され、人文科学、社会科学のほか、一般常識や倫理的判断を要する問題など、57の分野から出題される。日本独自の文化的背景に基づくJMMLUや、回答の選択肢を10個に増やし、知識だけでなく、推論能力をより的確に評価できるMMLU-Proなどの派生テストも考案されている。大規模マルチタスク言語理解。

出典　小学館