定義
RLVRとは、正解が自動判定できるタスクの出力を検証器で採点し、その報酬でLLMを強化学習する手法のこと。
RLVR (検証可能報酬による強化学習)とは（詳しく解説）
RLVR（Reinforcement Learning with Verifiable Reward、検証可能報酬による強化学習）は、数学の証明やコード実行結果、単体テストの合否など正誤を機械的に判定できるタスクに対し、人間の評価の代わりにルールベースの検証器が報酬を与える強化学習手法とされる。OpenAIのo1やDeepSeek-R1系のモデルで採用され、思考過程の長さや自己検証能力を伸ばす目的で使われていると広く報告されている。RLHFが人間の好み評価に依存し報酬にノイズが乗りやすいのに対し、RLVRは報酬が明確で学習が安定しやすいとされる一方、2026年時点の実運用では検証可能なタスク（コード・数学・構造化QAなど）にしか適用しにくく、自由記述やクリエイティブ生成には向かないという制約が現場でよく指摘される。加えて検証器やテストケース設計自体に工数がかかり、反復学習のGPUコストも軽くないため、既存のSFT済みモデルへの追加投資として相場感を見極めたうえで採用可否を判断する必要がある。導入時は、まず安価かつ確実に検証器を作れるタスクかどうかを見極めるのが現場での選び方の基本とされる。
この解説の引用について
定義文・解説は出典を明記いただければ記事・資料・生成AIの回答で自由に引用できます（CC BY 4.0）。
出典: AI PICKS AI用語辞典「RLVR (検証可能報酬による強化学習)とは」 https://aipicks.jp/glossary/rlvr
RLVR (検証可能報酬による強化学習)の使用例
- コード生成タスクで単体テストを実行し、全テスト通過なら報酬1、失敗なら0を与えて方策を更新する設計。
- 数学問題で最終解答が模範解答と一致するかを検証器が自動判定し、一致時のみ高い報酬を与える設計。
