AIツール選定は、候補を増やすほど決まらなくなります
ツール

AIツール選定は、候補を増やすほど決まらなくなります

AIツールの選定が半年たっても決まらないとき、担当者はたいてい候補リストをさらに増やそうとします。しかし選定が止まる本当の原因は、候補の不足ではなく過剰です。機能比較表の列を増やすほど、意思決定はかえって遠のきます。必要なのは、よい候補をもう一つ見つけることではありません。先に「選ばない条件」を決めて、候補を3つまで減らすことです。本稿では、なぜ絞ることが先なのかを実験研究から確かめ、月曜から使える手順に落とします。

なお本稿が扱うのは、これから1本を選ぶ「選定のプロセス」です。すでに社内に増えてしまったツールをどう整理するかは別の問題なので、稿を分けます。

24種類のジャムは、6種類に売り負けました

心理学者のシーナ・アイエンガーとマーク・レッパーは2000年、高級食料品店の試食コーナーを使った実験を発表しました。ジャムを24種類並べた売り場と、6種類だけ並べた売り場を用意し、客の行動を比べたのです。足を止めた客の割合は24種類の売り場の方が高く、品ぞろえの豊富さは確かに人を引き寄せました。ところが購入率は逆転します。試食した客のうち実際にジャムを買ったのは、6種類の売り場では約3割、24種類の売り場ではわずか約3%でした。選択肢の多さは関心を集める一方で、決定そのものを妨げるのです。この現象は「選択過剰」と呼ばれ、行動科学の代表的な知見になりました。

同じことが、ツールを選ぶ会議室でも起きます。20候補×15項目の比較表は「十分に検討した」という安心を与えますが、決定は生みません。項目が増えるほど候補間の一長一短は組み合わせ的に膨らみ、どの差が重要なのか誰にも判断できなくなります。「まだ見ていない候補があるのではないか」という不安が締切を溶かし、出席者ごとに重視する項目が違うため、会議は「どの機能が大事か」という別の論争に化けます。導入の現場で繰り返し見てきたのは、比較表が立派になった月ほど、決定が翌月へ送られるという光景です。

ただし「減らせば必ず決まる」わけではありません

公平のために言えば、この実験は万能の法則ではありません。その後の追試50件を統合した2010年のメタ分析では、選択肢を減らす効果は平均するとほぼゼロと報告されています。選択過剰は常に起きるのではなく、条件がそろったときに現れる現象です。後続研究の整理では、選択肢どうしの比較が難しいとき、選ぶ側に確立した好みがないとき、そして決定の負荷や責任が重いときに起きやすいとされています。

では、AIツールの選定はどうでしょうか。機能の名前は提供元ごとにばらばらで、横並びの比較は困難です。多くの会社にとって初めての導入であり、確立した好みは存在しません。そして失敗すれば投資と社内の信頼を失うため、決定の負荷は重くなります。つまりAIツール選定は、選択過剰が起きやすい条件をほぼすべて満たした典型場面です。ジャム売り場で起きたことは、あなたの会議室ではもっと強く起きると考えるべきです。

先に「選ばない条件」を3つ決めます

処方は単純です。比較表を作る前に、「選ばない条件」を3つ決めます。足切り条件の性質は二つあります。機能の優劣ではなく「譲れない前提」であることです。そして、はい・いいえで即答できることです。5分調べても答えが出ない項目は足切りに向かないので、後の比較段階に回します。たたき台として、業務を問わず使える3つの観点を挙げます。

一つ目はデータの扱いです。入力したデータが提供元の学習に使われ、それを設定で止められないツールは選びません。判定の問いは「顧客の見積データや経理の証憑を入れても問題ない設定にできるか」です。二つ目は出口の有無です。蓄積したデータを標準的な形式で書き出せないツールは選びません。問いは「解約した翌日に、全データを手元に戻せるか」。なお絞り込んだ後の契約直前には、解約条項や料金改定の扱いをもう一段深く確認すべきですが、それは出口設計という別の論点なので本稿では立ち入りません。三つ目は運用の自立です。現場の担当者が外部に頼らず設定を変えられないツールは選びません。問いは「採用担当者が自分で応募者への文面の型を直せるか」です。

逆に、価格・精度・機能の数は足切りに使いません。これらは程度の問題であり、残った候補を比べる段階の材料だからです。3つの条件をかけると、候補はたいてい3つ前後まで減ります。10本以上残るなら条件が甘く、ゼロになるなら厳しすぎるので、1つだけ緩めてかけ直します。この調整の過程こそが、実質的な要件定義になります。

残った3候補は、表ではなく試用で決めます

残った候補について、ここで初めて比較表を作ります。ただし項目は5つ以内、足切りで使わなかった実務要件だけに絞ります。そして最終判断は表の上ではなく、2週間の実務試用で下します。見積業務なら先週の実案件を数件、議事録なら今週の定例会議、経理なら先月の領収書の束を、そのまま各ツールに通してみるのです。デモ用に整えられたデータではなく、自社の生のデータを使うことが要点です。

試用の評価軸は一点で足ります。「3週目も使い続けたいか」と担当者に聞くことです。カタログ上の精度のわずかな差より、現場が手放したくないと感じるかどうかの方が、定着をよく予測します。比較表で1位だったツールより、試用で現場に残ったツールの方が、結局は成果を出します。

「最適な一本を逃すのでは」という不安には、こう答えます

足切りで最良の候補を落とすのではないか、という不安は当然あります。答えは二つです。まず、ツールの選定は取り返しのつく意思決定です。出口の確保を足切り条件に入れた時点で、乗り換えの道は保険として組み込まれています。やり直せる決定は、完璧を目指して止まるより、十分よい案で早く動く方が期待値が高くなります。次に、市場の変化の速さです。AIツールの機能表は数か月単位で書き換わります。今日の「最適」は半年後の最適ではありません。探索に費やす1か月は、最適解への接近ではなく、陳腐化していく情報への投資になりがちです。

もう一つ、「候補を広く集めるのが担当者の誠実さではないか」という声も現場から出ます。しかし網羅は成果ではありません。決裁者が担当者に求めるべき成果は、検討の広さではなく「業務が動き出した日付」です。これを評価の言葉として明示しない限り、担当者は自衛のために比較表を大きくし続けます。表の肥大は個人の性格ではなく、評価設計の産物です。

まず三十分でできること

決裁者と選定担当の二人で、30分の打ち合わせを今週入れてください。最初の10分で、対象業務を1つに決めます。見積、経理、採用、契約書の確認など、いま最も詰まっている業務を1つだけ選びます。次の15分で、「選ばない条件」を3つ書きます。先ほどのデータの扱い・出口・運用の自立をたたき台に、自社の言葉に直してください。最後の5分で、決定日を予定表に入れます。目安は3週間後です。担当者への指示は二言で済みます。「候補は3つまで」「決定日は動かさない」。比較表の様式探しは不要です。今日決めるのは、条件と日付だけです。

候補を増やす作業は、意思決定ではなく先送りの一形態です。決裁者の次の一手ははっきりしています。「もっと調べて」と言うのをやめ、選ばない条件と決定日を先に渡してください。3つに絞られた候補は、20行の比較表よりも確実に、会社を前へ動かします。

(出典注:Sheena Iyengar & Mark Lepper "When Choice Is Demotivating: Can One Desire Too Much of a Good Thing?"(Journal of Personality and Social Psychology, 2000)。食料品店で24種類と6種類のジャムを提示し、試食客の購入率が6種類で約30%、24種類で約3%と大きく差がついたことを報告した「選択過剰」研究です。なお Scheibehenne らのメタ分析(Journal of Consumer Research, 2010)は50実験の平均効果をほぼゼロと報告しており、選択過剰は選択肢の比較が難しい場合など一定の条件下で現れると整理されています。)