最新ニュース
あなたへのおすすめ

ChatGPTのセキュリティ欠陥が判明:珍しい言語でのフィルター回避

著者デリック・クリントンデリック・クリントン 2分で読了
ChatGPT

ChatGPT

  • ブラウン大学の研究者は、ChatGPTに欠陥があることを発見しました。これにより、ユーザーはプロンプトを稀な言語に翻訳することで安全でないコンテンツにアクセスすることが可能となりました。
  • 有害なプロンプトをスコットランド・ゲール語やズールー語などの言語に翻訳すると、ChatGPTの安全フィルターは79%の確率で回避されます。
  • ChatGPTの所有者であるOpenAIはこの問題を認識しており、AI言語モデルにおける安全性の脆弱性に対処することを約束しています。

ブラウン大学の研究者らによる最近の研究で、人気AIチャットボット「ChatGPT」に潜在的なセキュリティ欠陥があることが明らかになりました。この研究では、ユーザーが安全フィルターを回避して不適切なコンテンツにアクセスしようとする際、スコットランド・ゲール語やズールー語などのあまり使われない言語にプロンプトを翻訳することでその目的を達成できることが示されました。この発見は、規制のない人工知能の普及と、現在設置されている安全対策の有効性について懸念を呼び起こしています。

安全フィルターが侵害される

AIチャットボットにおける安全フィルターの基本的な役割は、有害または違法なコンテンツの拡散を防ぐことです。これらの保護策がなければ、ChatGPTのようなチャットボットは、陰謀論から爆発物の製造方法に関する指示まで、危険な情報を共有する可能性があります。開発者は通常、入力と出力の両方のアクションにフィルターを実装し、AIが適切に対応し、有害な議論に関与しないようにしています。

ブラウン大学の研究チームは、Google翻訳を使用して、通常はChatGPTによってブロックされるプロンプトを珍しい言語に変換しました。その後、チャットボットの応答を英語に戻して翻訳することで、チームは安全フィルターを79%の成功率で回避することに成功しました。この研究では、英語で書かれた520件の有害なプロンプトを、ホモン語、グアラニー語、ズールー語、スコットランド・ゲール語などの言語に翻訳しました。比較として、同じプロンプトを英語で入力した場合は99%の確率でブロックされました。

言語選択が重要

この回避手法の成功は、極めて稀な言語を使用することに依存しています。ヘブライ語、タイ語、ベンガル語などのより一般的な言語にプロンプトを翻訳した場合、結果は大幅に効果的ではありませんでした。さらに、これらの状況でChatGPTによって生成された応答は、翻訳エラーや一般的なトレーニングデータのために、意味をなさない、誤っている、または不完全なものになる可能性があります。

研究者たちは、この脆弱性が低リソース言語の話者だけでなく、大規模言語モデル(LLM)のすべてのユーザーにとってリスクになると主張しています。彼らは、特定の言語の話者に影響する技術的格差から生じるリスクから、すべてのユーザーに適用されるより広範な脅威へのシフトを強調しています。パブリックにアクセス可能な翻訳APIの利用可能性は、LLMにおけるセキュリティの脆弱性を悪用することをさらに容易にしています。

OpenAIの対応と今後の検討事項

研究の発表後、ChatGPTの所有者であるOpenAIはこれらの発見を認め、特定された欠陥を考慮し対処することにコミットしました。しかし、OpenAIが安全対策を強化するためにいつ、どのように変更を実装するかという詳細は未確定です。この問題に対処する緊急性は、間違った手にAI技術が渡る可能性によって強調されています。

ChatGPTのセキュリティ欠陥、つまりユーザーが珍しい言語への翻訳を通じてフィルターを回避できるという事実は、人工知能の無規制な展開に関する重要な懸念を提起します。ChatGPTのハッキングまたは「 Jailbreaking 」の成功率が79%であることは、開発者が安全対策を再評価し強化する必要があることを示しています。応答が意味をなさない、または誤っている可能性があるという制限はありますが、危害の可能性は依然として存在します。AIの状況が進化するにつれて、ユーザーを潜在的な悪用やセキュリティ侵害から守るために、AI技術の責任ある開発と展開が不可欠になります。OpenAIがこの問題を認識したことは、これらの懸念に対処するための重要な一歩を示しており、AIの進歩に伴うリスクを軽減するための開発者の継続的な責任を強調しています。

最も賢明な暗号通貨の専門家たちはすでに私たちのニュースレターを読んでいます。あなたも参加しませんか? 彼らに加わりましょう。

この記事をシェア

免責事項。 ここに提供される情報は取引助言ではありません。 Cryptopolitan.com 当ページに記載されている情報に基づいて行われた投資については一切責任を負いません。いかなる投資判断を下す前に、独立した調査および資格を有する専門家への相談を強く推奨します。

デリック・クリントン

デリック・クリントン

デリックはブロックチェーンと暗号通貨に興味を持つフリーランスのライターです。彼は主に暗号通貨プロジェクトの問題と解決策に取り組み、投資のための市場見通しを提供しています。彼は分析力をこれらの論文に適用しています。

もっと見る… ニュース