「最初の AI ソフトウェアエンジニア」は、依頼されたタスクの大半をこなせない

1月 25, 2025

AIテック企業CognitionのDevinは、AIソフトウェアエンジニアとして最初とされているが、その仕事が驚くほど酷いと研究者が発見
独立したAI研究・開発ラボであるAnswer.AIの機械学習データサイエンティストチームが1か月間Devinと共に過ごし、20のタスクのうち14の失敗、3の不明確な結果、3の成功を確認
Devinは基本的な問題に苦しんでおり、AI企業CognitionのDevinはまだ基本的な問題に苦しんでいることが明らかに
DevinはSlackを通じて操作され、$500/月から利用可能だが、タスクの完了に人間よりも長い時間がかかることが発見された
AI企業の主張と現実の間には広い隔たりがあり、AIアシスタントがソフトウェアエンジニアを適切に置き換えることができるかは未だ見極めが必要

AI技術は進化を遂げているが、この記事からはまだまだ課題が残っていることが伝わってきます。AIが人間の仕事を置き換える時代が迫っていると言われていますが、現実にはその実現には時間がかかりそうです。AI技術の進歩は素晴らしいですが、その導入には慎重さが求められると感じます。