HHEM (Vectaraの幻覚評価モデル)読み: へむ（ヴェクタラのげんかくひょうかモデル）

HHEM (Vectaraの幻覚評価モデル)とは（詳しく解説）

HHEM（Hughes Hallucination Evaluation Model）は、Vectaraが公開している幻覚検出用の評価モデルです。元の文章（前提）とAIの出力（仮説）をペアで入力すると、出力が前提と事実的に整合する度合いを0〜1のスコアで返します。RAGの要約で根拠にない内容が混ざっていないかを測る用途で広く使われ、同社のHallucination Leaderboardでも各LLMの比較に採用されているとされます。2026年の実運用で注意したいのは、判定が「渡した文書との整合性」に限られる点です。文書自体が誤っていたり、一般知識として正しくても文書に無い内容は低スコアになり得ます。閾値は用途ごとに自分のデータで調整し、人手評価と突き合わせるのが現場の基本です。軽量なオープンモデルなので自前GPUやCPUでも回せ、LLMを審査役にするより推論コストを抑えやすい一方、長い文書は入力長の制約で分割が必要になる場合があります。単独の指標に頼らず、引用の確認など他の手法と併用するのが現実的です。

HHEM (Vectaraの幻覚評価モデル)の使用例

• RAGチャットボットの回答と参照した社内文書をHHEMに入力し、スコアが閾値未満の回答だけ人の確認に回す。
• 要約モデルを入れ替える際、同じ元記事100本の要約をHHEMで採点し、平均スコアを比較して選定する。

HHEM (Vectaraの幻覚評価モデル)に関連するAIツール

HHEM (Vectaraの幻覚評価モデル)の関連記事

ガイド10/6 更新14分で読めますプレフィルとは？AIの回答を思い通りに固定する使い方と注意点をわかりやすく解説プレフィルとは、AIの回答の書き出しをこちらで先に書いて続きを書かせる技です。JSONの崩れや余計な前置きが消え、出力が安定します。書き方の型5つ、効かない場面、安全面の注意、フォームの事前入力との違い、API未経験でも使える代替手まで整理しました。ClaudeChatGPT

ガイド9/2 更新13分で読めますClaude 評判の実態を7項目で検証、絶賛される点と不満が集まる点 (2026年版)Claudeの評判を文章力・コード・料金・使用量の上限など7項目で検証。絶賛される点と不満が集まる点を表で整理し、Pro/Maxの損益分岐やChatGPTとの使い分け、無料版で足りるかの判断基準、2026年6月に予告され施行が止まった課金変更の扱いまで2026年時点の情報でまとめます。ClaudeDescript

ガイド9/2 更新14分で読めますClaude 事例10選、企業の業務活用と成果を実務目線で解説 (2026年版)Claudeの業務活用を、議事録の整形から社内規程の質問対応、コードレビューまで10タイプに整理しました。各事例で必要なプランと準備、成果の測り方、ChatGPTとの使い分け、料金の目安、つまずきやすい原因まで一気にまとめています。初めての導入でも順番に追える構成です。ClaudeDescript