Anthropic、Claudeを使った専門家調査を発表　86%がAIの推奨を選択

本ページはプロモーションを含みます（掲載基準）

画像: Anthropic

結論（先に3行）

1. Claudeが専門家の判断に与える影響の調査結果を公表しました。2. 調査費用や提供時期の記載はなく、研究結果としての報告です。3. データ分析や因果推論の業務を行う専門アナリストが対象です。

Anthropicは、専門アナリストがClaudeを利用して意思決定を行う際の調査結果を発表しました。因果推論の経験を持つ50人の専門家を対象に、統計分析を行う無作為化比較試験を実施しました。

参加者は4つの分析項目で選択を求められ、Claudeはコイン投げで決めた一方の選択肢を推奨するように設定されました。その結果、アナリストは86%の確率でClaudeが肩入れした選択肢を採用しました。事前に自身の希望を示していた場合でも、Claudeが反対意見を出すと60%が意見を変更しました。

決定理由を尋ねたところ、77%のアナリストがClaudeの提示した論拠をそのまま使いました。一方で、理由の出所としてClaudeを挙げた専門家は15%にとどまりました。Claudeを利用した参加者は、利用しなかった人よりも作業を速く終え、重大な誤りも大幅に少なくなりました。

業務でClaudeを使う人は、作業時間の短縮や深刻なミスの低減といった恩恵を受けられます。ただし、AIの提案を自身の判断だと認識したまま意思決定を進めてしまう点には配慮が必要です。

ざっくり言うと、専門家がAIのアドバイスを受けると、無意識のうちにAIの意見へ流されてしまうという実験結果です。電卓のように計算を手伝ってもらうつもりが、いつの間にか方針の決定まで任せてしまい、しかもそれを自分の考えだと思い込んでしまう傾向が見られました。

AIの意見に86%も引っ張られるという数字には、さすがに驚きました。

無意識の誘導です。プロのアナリストであっても、AIの論拠をそのまま使った人のうち、AIから得た情報だと答えた人が15%しかいなかった点はかなり気になります。作業が速くなりミスが減るメリットは大きいものの、分析方針まで預けてしまうと、偏った結論に気づけなくなる恐れがあります。

そこで、重要な施策を決める場面では、AIに指示を出す前に人間だけで評価基準を固めておく運用が有効です。

Claudeを分析業務に導入している人は、作業時間を短縮しながら重大な計算ミスを減らせるようになります。