ChatGPTの基礎的な数学への苦戦を明らかにする研究

写真 2023 08 06 23 22 19
- AIモデルにおけるドリフトは課題を生み、ある機能の強化が他の機能の犠牲になることで予期せぬ結果を招きます。
- ChatGPTの基礎数学やその他のタスクでの低下は、AIモデルの一貫した進歩の複雑さを浮き彫りにしています。
- AIシステムが時間とともに進化していく中で、その理解と改良には警戒心と厳格なモニタリングが不可欠です。
急速に進化するテクノロジーの世界において、人工知能(AI)チャットボットは重要な突破口として台頭してきました。その中でも、OpenAIのChatGPTは際立った存在であり、昨年公開されて以来、聴衆を魅了し続けています。流暢な会話を行うその能力は称賛を集め、さらに高度なAIモデルを開発するための激しい世界的な競争に火をつけました。しかし、AIの潜在的な支配力への拍手と懸念の中で、最近の調査結果は予期せぬ展開を明らかにしました。ChatGPTの基礎的な数学能力の低下です。
AIの「ドリフト」現象を理解する
AIにおける「ドリフト」という用語は、単なる流行語ではありません。それは学術コミュニティの注目を集めている、実際に観察された現象です。スタンフォード大学とカリフォルニア大学バークレー校の共同研究により、このAI行動の興味深い側面が明らかにされました。
'ドリフト'の本質は、モデル最適化の意図しない結果にあります。研究者や開発者がこれらの複雑なAIモデルの特定の機能を強化しようと努めるにつれて、他の領域が意図せず損なわれる可能性があります。まさにそれがChatGPTで起きていることです。
スタンフォードの著名な教授であり、研究の中心的な貢献者であるJames Zou氏は、「モデルを特定の方向で強化するために調整すると、他の領域で後退する具体的なリスクがあります」と説明しました。この本質的な課題は、AIモデルの一貫した進歩を達成することの複雑さを浮き彫りにしています。
衰退の深掘り
この研究は、ChatGPTの能力を表面的に見ただけのものではありませんでした。それは、スタンフォードの勤勉なコンピュータサイエンス博士課程学生であるLingjiao Chenと、バークレーの著名な人物であるMatei Zahariaによって主導された綿密な分析でした。彼らの目的は明確でした。2つの異なるバージョンのChatGPTが、ある期間を通じてどのように機能したかを評価することでした。
その発見は驚くべきものでした。コンピュータにとって比較的単純なタスクである素数の特定は、このような高度なAIにとって容易であると想定されるでしょう。しかし、結果は異なる物語を語っていました。
3月に行われたテストでは、ChatGPTのプレミアムバージョンであるGPT-4に1,000の異なる数字が提示されました。GPT-4はそれらの84%の素数性を正しく判定することに成功しました。6月には、その精度はわずか51%まで急落しました。これは孤立した事件ではありませんでした。8つの多様なタスクのうち、GPT-4のパフォーマンスは6つで悪化しました。GPT-3.5は6つの領域で改善しましたが、主にその後継者に遅れを取っていました。
急速なドリフトの影響
'ドリフト'はAI愛好家の間で認識されている概念ですが、ChatGPTでそれが現れた速度は予想外でした。研究チームの観察は数学的なタスクを超えていました。彼らは、意見中心のクエリに対するGPT-4の対応の顕著な低下に気づきました。3月の称賛すべき98%の対応率から、6月には23%に減少しました。
この後退は、台頭しつつある「プロンプトエンジニアリング」のトレンドと関連している可能性があります。これは、ユーザーが特定の、そして時には論争を呼ぶAIの応答を引き出すために、特定のプロンプトを作成することを指します。ChatGPTの数学的能力の低下は、そのような操作的なプロンプトに対抗するために取られた措置の意図しない結果である可能性があります。
AIの未来への対応
これらの障壁にもかかわらず、特に研究コミュニティの間での合意は、その技術を捨てることではありません。代わりに、重点は警戒にあります。Zou氏は、より厳格な監視アプローチを熱心に提唱しています。彼の感情に共鳴して、スタンフォードとバークレーの共同チームは、ChatGPTを含むAIモデルを一連のテストにかけようとしています。その目的は?時間経過に伴うそれらの進化を実証的に測定することです。
AIの進歩の道は直線的ではありません。それは、前進の歩み、偶発的なつまずき、そして予期せぬ迂回によって特徴づけられる動的な旅です。グローバルコミュニティがAIの複雑な迷路をナビゲートし続ける中で、一つのことが明らかです。これらのシステムを理解し、洗練させる旅は、まだ終わっていません。
最も賢明な暗号通貨の専門家たちはすでに私たちのニュースレターを読んでいます。あなたも参加しませんか? 彼らに加わりましょう。
免責事項。 ここに提供される情報は取引助言ではありません。 Cryptopolitan.com 当ページに記載された情報に基づいて行われた投資について、一切の責任を負いません。投資判断を下す前に、独自の調査を行うか、資格を有する専門家にご相談されることを強く推奨します。

ジョン・パーマー
John Murangiri氏は、市場分析のスキルを身につけてCryptopolitanに参加しました。John(通称JP)はナイロビ大学でマスコミュニケーションおよびメディア研究の学士号を取得し、これまでにInsideBitcoins.comやMetacoingraphで暗号資産市場の洞察を提供してきました。















