AIと一緒に決めれば、間違いは減る？106件の実験のまとめでは、組み合わせは平均で「得意なほう単独」に届かず、任せ方を先に決めることが鍵だった

仕事でも暮らしでも、AIの提案を見てから自分で決める場面が増えました。「AIと人が一緒に決めれば、どちらか一方よりも間違いは減るはず」と考えがちです。ところが、106件の実験をまとめた研究では、そうなるとは限りませんでした。どんなときに組み合わせがうまくいき、どんなときに失敗しやすいのか。頼りすぎる前に決めておきたいことを整理します。

01 結論から言うとAIと一緒に決めれば、間違いは減る？

人だけで決めるよりは良くなりやすいものの、いつも最善になるわけではありません。研究のまとめでは、人とAIの組み合わせは平均で、人とAIのうち得意なほうが単独で決めた場合より成績が下でした。

研究者が挙げる理由の一つは、人がAIの提案に頼りすぎたり、逆に頼らなさすぎたりすることです。AIが間違えたときに気づけず、そのまま採用してしまう。AIが正しいときに、自分の思い込みで退けてしまう。どちらも、人が最後に決める形で起きます。

ただし、うまくいく条件もわかってきました。それは「どちらが得意な判断か」と「決める作業か、作る作業か」です。条件を知っておけば、AIに任せる部分と自分で確かめる部分を、前もって分けられます。

02 研究とデータでわかっていること人とAIの組み合わせは、どんなときに失敗する？

AIのほうが人より正確な課題では、組み合わせの成績がAI単独より下がっていました。採用の書類選考の実験でも、間違った助言を受けた人は、助言なしのときより正解率が下がりました。

場面	研究での結果
人のほうが得意な判断	組み合わせが、人だけ・AIだけのどちらより良かった [1]
AIのほうが得意な判断	組み合わせは人だけより良いが、AI単独より下だった [1]
選択肢から選ぶ「決める作業」	組み合わせの成績が下がる傾向 [1]
文章や画像を「作る作業」	組み合わせの成績が上向き（はっきりした差ではない）[1]
理由の説明・自信度の表示	成績にはっきりした差は出なかった（説明 [1][2]、自信度 [1]）

03 まだわかっていないことChatGPTのような生成AIでも同じ？

まとめに入った実験は2023年6月までに発表されたもので、結果の約85%は選択肢から選ぶ課題でした。会話型の生成AIを毎日の仕事で使う場合に、同じ結果になるかはまだわかっていません。

04 今日からできること頼りすぎないために、何を決めておく？

研究では、どちらが得意か、決める作業か作る作業か、責任を意識しているかで結果が変わっていました。前もって作業ごとに任せ方を決め、最後に確かめる人を決めておくと、頼りすぎに備えられます。

健康や薬のことをAIに聞く場面では、AIが正しく答えられても、使う人の判断が良くならなかったという研究もあります（AIに病気や薬のことを聞いても大丈夫？）。

05よくある質問

AIの答えに理由や根拠の説明がついていれば、信じていい？

説明があっても安心はできません。106件の実験のまとめでは、AIが説明や自信度を示しても、人とAIの組み合わせの成績にはっきりした差は出ませんでした。採用の書類選考の実験でも、説明を見せても、間違った助言に引っぱられる人は減りませんでした。

AIを使うと、かえって成績が下がることはある？

あります。研究のまとめでは、AIのほうが人より正確な判断では、組み合わせの成績がAI単独より落ちていました。一方、人のほうが正確な判断では、組み合わせが人だけ・AIだけのどちらより良くなっていました。

仕事でAIの提案を使うとき、まず何を決めておけばいい？

「どの作業をAIに任せ、どこを自分が確かめるか」と「最後に誰が責任を持つか」の2つです。研究では、決める作業より文章や資料を作る作業のほうが組み合わせの良さが出やすく、責任を意識した人ほど自動化への頼りすぎによる誤りが少ない傾向がありました。

関連記事

AIに頼りすぎ

AIの答えに古い情報が混ざっていた。研究では調べた24種類のAIすべてで1割以上が古い答えで、使う前に日付と出典を確かめる

AIに頼りすぎ

AI翻訳を信じて送った文章が、誤訳だった。研究では、1文ずつは9割前後正しくても、文書全体では誤りが混ざりやすかった

AIに頼りすぎ

検索結果の上に出るAIの要約は信じていい？研究では、出典で裏づけられた文は約半分。大事な一文は出典を開いて確かめる