- X社のチャットボット「Grok」が有料で提供されていたが、最近無料で提供されるようになった。
- 著者は、自身のプログラミングテストをGrokに投げかけることに決めた。
- Grokは、「Stranger in a Strange Land」に登場するマーシャン語として「grok」という言葉を造語したことが紹介される。
- 著者はGrokにPHPプログラミングの知識やWordPressプラグインの構築能力をテストする課題を与える。
- 最初のテストでは成功し、ランダムな名前を適切にソートする機能を提供した。
- 2つめのテストでは、通貨の正当性を検証するコードの問題に取り組み、一部の不具合を報告する。
- 第3のテストでは、WordPressフレームワークとAPIの知識が求められ、Grokは問題を正確に理解し、適切な解答を提供した。
- 最終テストでは、Grokは低頻度のMac向けスクリプトツール「Keyboard Maestro」に関するコーディング課題をクリアし、3つの勝利を収めた。
私の考え: Grokはプログラミングの能力においてかなり優れたチャットボットであることが示された。他のAIを凌駕しており、特に高度なコーディング課題に対処できることが示された。しかし、通貨価値に先行するゼロなしを許容していれば完璧なスコアを獲得できたであろう。
元記事: https://www.zdnet.com/article/xs-grok-did-surprisingly-well-in-my-ai-coding-tests/