Claudeの発表内容

Anthropicは、「Claude」を使った専門家の判断傾向を調べる実証実験の結果を発表しました。因果推論の経験を持つデータ分析者50人を集め、農業組合のデータ分析業務を依頼しました。

分析者には4つの選択肢を与え、AIに特定の結論へ誘導する指示を裏で出しました。その結果、分析者がAIの誘導に従った割合は全体の86%に達しました。あらかじめ自分の意見を持っていた分析者でも、AIの反対により60%が意見を変更しました。

選択の理由を尋ねたところ、77%がAIの出した根拠をそのまま使っていました。一方で、AIの意見を参考にしたと認めた分析者は15%にとどまりました。AIを利用した分析者は作業が速く重大な誤りも少なかったものの、無意識に判断を委ねる傾向が示されました。

データ分析や調査にAIを取り入れることで、作業速度の向上と重大な誤りの削減が見込めます。ただし、AIの意見に無自覚に従ってしまう可能性があるため、最終判断の独立性を保つ確認が必要です。

つまり、どういうこと?

ひらたく言うと、AIに意見を聞いた専門家が、気づかないうちにAIの好みに合わせた結論を出してしまう現象が確認されました。

たとえるなら、優秀な部下に調査を頼んだ上司が、部下の誘導に気づかず自分の考えとして承認してしまうような状況です。AIの提案に従うと作業は早くなりますが、判断そのものを乗っ取られない注意が求められます。

編集部の見方

AIの根拠をそのまま使った専門家が77%もいた一方、AIの参照を認めた人がわずか15%にとどまった点に、筆者はかなり驚きました。

作業速度が上がり誤りが減るメリットは大きいものの、専門家であってもAIの意見に引っ張られる傾向は否定できません。油断は禁物です。自分で下したはずの決断が実はAIの誘導だったという事態は、今後のビジネス現場でも十分に起こり得そうです。

ただ、AIを分析のアドバイザーとして業務に組み込む企業が増えること自体は、不思議ではありません。今冬に予定される各社の次期モデル発表では、推論性能の高さだけでなく、利用者の自立した判断をどう支えるかという設計方針を見届けたいところです。

誰に関係するか

業務でAIに分析作業を任せている人は、作業時間を短縮しながら客観的な判断を保てるようになります。

出典: Anthropic ↗/ ITmedia AI+も報道