本記事では、LLMコーディングツールを使う開発者がどのような認知バイアスに陥りやすいのかを調査した研究を紹介します。
LLMコーディングツールは、いまや多くの開発者にとって欠かせない存在となっています。ツールの普及により、プログラミングの本質が「コードを書く」作業から「AIの提案を評価・選択する」作業へと変化しつつあります。
そして興味深いことに、この変化は開発者の意思決定に予想外の影響を及ぼしているようです。従来のプログラミングでも認知バイアスは存在していましたが、LLMとの協働作業では、それとは異なる新たなバイアスのパターンが生まれている可能性があるのです。
背景
GitHubの調査によると、現在92%以上の開発者がAIコーディングツールを利用しているといいます。GitHub CopilotやChatGPTといったツールは、もはや一部の先進的な開発者だけのものではなく、業界全体に浸透しつつある状況です。
この急速な普及に伴い、プログラミングという作業の性質そのものが変わり始めています。かつてプログラミングといえば、開発者が自らコードを考え、書き上げていく「生成」の作業でした。しかし今では、AIが提案するコードを見て、それを採用するかどうかを判断する「評価」の作業が大きな割合を占めるようになっています。
ここで重要になってくるのが「認知バイアス」です。認知バイアスとは、人間の思考に潜む系統的な偏りのことで、論理的な判断から私たちを逸らせ、最適とは言えない意思決定へと導いてしまうものです。通常のソフトウェア開発においても、自分の仮説に合う情報ばかり集めてしまう「確証バイアス」や、最初に見た情報に引きずられる「アンカリングバイアス」などが開発者の判断に影響を与えることが知られていました。
では、AIツールとの協働が当たり前になった今、こうした認知バイアスはどうなっているのでしょうか。AIの提案を評価し、適切なプロンプトを考え、生成されたコードを自分の意図と統合していくという新しい作業プロセスは、従来とは異なる認知的な課題をもたらしている可能性があります。
そこで本記事では、LLMコーディングツールを使用する開発者がどのような認知バイアスに影響されやすいのか、そしてそれにどう対処すべきかを明らかにした調査を詳しく見ていきます。
