- Xが最初にチャットボットを導入した際、有料だったが、最近Grokを一般に公開した。
- GrokはRobert Heinleinによって作られた言葉で、深い理解を意味する。
- GrokはPHPプログラミングを知り、WordPressプラグインを構築することができるコーディングテストに合格した。
- 次のテストでは、Grokは正しく機能するコードを提供し、名前をランダム化して分離することに成功した。
- しかし、通貨金額に先頭のゼロがない値を許可しないコードを生成し、1つのテストに失敗した。
- GrokはWordPressフレームワークとAPIの知識が必要なテストでも成功し、機能的に正しい回答を提供した。
- 最終的に、Grokは4つのテストのうち3つに合格し、ChatGPT LLMに基づいていない他のAIよりも優れたパフォーマンスを示した。
私の考え：Grokはプログラミング能力においてかなり強力なチャットボットであり、テストにおいて優れた結果を示しました。通貨金額に関する制限などの改善があれば、完璧なスコアを獲得できる可能性があります。
元記事: https://www.zdnet.com/article/xs-grok-did-surprisingly-well-in-my-ai-coding-tests/