「Grok」に4つのAIコーディングテスト–驚きの好成績、理解しきれなかった課題は?

今回は「「Grok」に4つのAIコーディングテスト–驚きの好成績、理解しきれなかった課題は?」についてご紹介します。

関連ワード (オフトピック等) についても参考にしながら、ぜひ本記事について議論していってくださいね。

本記事は、ZDNet Japan様で掲載されている内容を参考にしておりますので、より詳しく内容を知りたい方は、ページ下の元記事リンクより参照ください。


 Xがチャットボットを初めて発表した際、有料の壁が立ちはだかっていた。しかし、「TANSTAAFL(何も失わずに何かを得られることはない)」にもかかわらず、Xは最近、「Grok」を世界に公開した。そこで筆者は、プログラミングテストを実施してみた。

 筆者は、サービス名からしてGrokに興味をそそられていた。「Grok」という言葉は、私が大好きなSF作家の一人であるロバート・A・ハインライン(Robert Anson Heinlein)氏による造語である。

 ハインライン氏に夢中になり過ぎない程度に言うと、彼は社会規範に関しては非常にオープンな考えを持っていた。彼は力強い物語を書き、科学に関する素晴らしいテーマを物語に取り入れ、深い社会批評をしばしば作品に盛り込んだ。

 ハインライン氏は幅広い意味を持つ火星人の言葉として「grok」を生み出した。彼のSF小説「異星の客」で初めて登場したこの言葉は、「理解する」という意味で解釈でき、その理解のレベルは深く根本的である。AIチャットボットの名前としては完璧だろう。

 それでは、本題のプログラミングテストに入ろう。

 これは、AIがPHPプログラミングとWordPressプラグインの構築方法を知っていることを要求するコーディングテストである。このテストは、名前をランダムに並べ替えるツールが欲しいという妻からのリクエストから生まれたが、工夫が施されている。

 彼女は毎月、自身が運営するECサイトでユーザー参加型のマーケティング施策を実施しており、ランダムにユーザー名を抽出している。問題は、複数のプロジェクトを投稿したユーザーにはエントリーのチャンスが複数回付与されることだ。そのため、このランダム抽出では同一のユーザー名を管理し、結果の表示でその名前が隣り合わないよう調整する必要がある。

 最後に、コードは分かりやすいユーザーインターフェース(UI)を実現しなければならない。具体的には、ユーザー名を貼り付け、ボタンをクリックするだけで、結果のリストを得られる仕組みである。

 この課題をGrokに与えたところ、成功した。インターフェースは整然と配置され、機能的だった。そして最も重要なこととして、コードは目的通りに動作し、ユーザー名をランダム化し、同じ名前を分離した。このテストには合格点を与えよう。

 2つ目のテストは、あるユーザーから最初に報告された不具合を解決するものである。筆者が公開したコードは、ユーザーが入力した数値が有効なドル/セント通貨であるかどうかをテストするように設計されていた。筆者の間違いは、コードが整数のみを許可していたため、例えば5ドルの寄付は可能だが、5.25ドルの寄付は不可能だったことである。

 Grokは正規表現のコードをうまく書き換えてくれた。合格まであと一歩だったが、生成されたコードでは、有効な通貨単位である「.5」のような数値が許可されないため、不合格とせざるを得ない。「0.5」は許可されるが、全てのユーザーが小数点以下の数値にゼロを付け加えるわけではないだろう。

 また、二重変換を行うのにかなり非効率的なメカニズムを使用しており、数値に変換できない文字列を適切に処理することもできない。

 今のところ、1勝1敗である。

COMMENTS


Recommended

TITLE
CATEGORY
DATE
日本マイクロソフト、「Copilot」の社内活用を披露–広まる“BYOAI”
IT関連
2024-06-08 19:33
Publickeyが関連記事の動的生成をPHPとJavaScriptとMovableTypeで実装した方法とは?
編集後記
2023-09-01 10:02
KKCompany、法人向け動画配信プラットフォームを提供–社内外コミュニケーションを活性化
IT関連
2023-06-23 06:59
京都大と日本IBM、「Google Cloud」上に医療データ&AI基盤を構築
IT関連
2023-04-20 09:56
「いびつなiPadファミリー」は解消される? Appleの発表イベント「Spring Loaded.」で登場するかもしれないiPad ProとiPad miniのうわさまとめ
IT関連
2021-04-21 22:14
RedditがシリーズFで最大770億円調達へ、評価額は1兆円超えに
IT関連
2021-08-14 05:23
AIが習得すべきスキルを提案–「人的資本経営」を支えるオラクルのソリューション群
IT関連
2023-02-02 16:18
マイクロソフト、Windows Server 2012のサポート終了対応支援策を開始
IT関連
2021-08-17 04:22
「さよならau」から一転……KDDIの新プラン「povo」はおおむね好評 その強みとは? (1/2)
くわしく
2021-01-14 05:44
「Windows 10 21H2」への自動アップデート対象が拡大–「20H2」にも開始
IT関連
2022-01-27 03:20
ロシアがInstagramのブロックを発表
IT関連
2022-03-13 01:44
バイデン新大統領の労働政策とギグワーカーの未来
パブリック / ダイバーシティ
2021-01-23 23:54
ケンドリック・ラマーらの支援を受ける音楽ミキシングのマーケットプレイスEngineEarsがの1.1億円調達
Claima Stories
2021-05-07 23:37
山梨大学、「Azure OpenAI」を活用したチャットボットを構築–ナレッジコミュニケーションが支援
IT関連
2024-12-26 01:48