- OpenAIのコーディングモデルは過去2年間で大幅に向上し、Codeforces Eloの評価によって証明されている。
- AIモデルの性能は急速に向上し、各新しいイテレーションは前のモデルを大幅に上回っている。
- 2022年11月にGPT-3.5が導入された際、そのCodeforces Elo評価は実質的に0であった。
- 2023年初にリリースされたGPT-4は、392 Eloを達成し、人間の専門家との競争にはまだ遠く及ばなかった。
- 2024年中頃に登場したGPT-4oは、808 Eloに大幅に向上し、コーディング能力の向上の始まりを示した。
- 2024年後半にリリースされたO1-previewモデルは1258 Eloにジャンプし、O1-miniは1650 Elo、O1は1891 Eloに達した。
- O3-mini-lowモデルは1687 Elo、O3-mini-mediumは1997 Elo、O3-mini-highは2073 Eloに到達した。
- O3（フル）モデルは2727 Eloに達し、Codeforcesで最高ランクのコーダーの中に確立された。
- O4の予測Eloは3045であり、OpenAIのモデルはまもなく最もエリートな人間のコーダー以外を超える可能性がある。
OpenAIのコーディングモデルの急速かつ指数関数的な向上は、AIの進歩の信じられないほどの速さを示しています。2022年のGPT-3.5の0 Eloから2025年のO4の予測3045 Eloまで、その進歩は驚くべきものです。これらのモデルが改善を続けるにつれ、プログラミングの風景が再定義され、複雑な問題解決タスクが自動化され、ソフトウェア開発における人間とAIの協力が向上するでしょう。