MMLU読み: えむえむえるゆー

MMLUとは（詳しく解説）

MMLU (Massive Multitask Language Understanding) は LLM の知識量を測る代表的ベンチマークで、 57 分野 (数学 / 法律 / 医学 / 歴史 等) の選択式問題 約 1.5 万問。 2026 年現在、 GPT-5 / Claude Opus 4.7 / Gemini Ultra が 89-92% 前後で人間専門家平均 (89.8%) を超えた。 ただし モデルが学習データで MMLU の問題を見ている可能性 (リーク問題) が指摘され、 上位モデル間の比較指標としては飽和。 後継として MMLU-Pro / GPQA が登場している。 AI PICKS では LLM 比較記事で 必ず MMLU + 後継指標を併記している。

MMLUに関連するAIツール

MMLUの関連記事

ガイド2026年9月3日NEW

プレフィルとは？AIの回答を思い通りに固定する使い方と注意点をわかりやすく解説

プレフィルとは、AIの回答の書き出しをこちらで先に書いて続きを書かせる技です。JSONの崩れや余計な前置きが消え、出力が安定します。書き方の型5つ、効かない場面、安全面の注意、フォームの事前入力との違い、API未経験でも使える代替手まで整理しました。

関連ClaudeChatGPT

2026年9月3日

ガイド2026年9月2日NEW

DeepSeek 代替AI 8選｜無料・日本語・オープンソースで選ぶ乗り換え先 (2026年版)

DeepSeekの代替を、無料で使える・日本語が自然・オープンソースで自社に置ける、の3軸で8タイプに整理。API料金で見るべき4項目、社内規程で止まったときの逃げ道、UI・API・セルフホスト別の乗り換え手順と所要時間まで、2026年時点の情報でまとめました。

関連ChatGPTClaude

2026年9月2日

ガイド2026年9月1日NEW

副業会社員向け要約AI 5選月3,000円以下で選ぶ基準 (2026年版)

副業の会社員が要約AIを月3,000円以下で選ぶ基準を、テキスト・音声・検索の5タイプで整理しました。無料枠で足りる範囲、課金する順番、会社の資料を扱うときの線引き、初週の設定手順、1日15分を削る現実的な組み合わせ3パターンまでまとめています。

関連ChatGPTClaudeGemini

2026年9月1日