- ChatGPTはプログラミングの質問に対して52%の不正確な回答を提供する
- Purdue大学の研究によると、ChatGPTの52%の回答には誤情報が含まれていることが明らかになった
- 研究者は517以上の質問をStack Overflowで調査
- 35%のプログラマーがChatGPTを好んで使用し、39%はエラーに気づかない
- Stack OverflowはChatGPTの使用を禁止し、疑念を表明
考察: ChatGPTのプログラミング質問に対する不正確な回答率が高いことは深刻であり、Stack OverflowがChatGPTの使用を禁止したことで、AIによる回答の正確性に対する疑念が浮上している。プログラマーが信頼を置くChatGPTの回答には、丁寧な言葉遣いや教科書のような回答が含まれているため、誤った情報を見逃す傾向がある可能性が示唆されている。
元記事: https://itc.ua/en/news/chatgpt-answers-52-of-programming-questions-incorrectly-study/