AKTUELLE NACHRICHTEN
FÜR SIE AUSGEWÄHLT

GPT-4-Chatbot zerschlägt AI-Guardian des Bildklassifizierers im Forschungsversuch

VonAamir SheikhAamir Sheikh 2 Min. Lesezeit
Chatbot-KI
  • Ein Google-Wissenschaftler demonstriert die Fähigkeit von GPT-4, die Abwehrmaßnahmen von AI-Guardian in einem bahnbrechenden KI-auf-KI-Vorgehen zu durchbrechen.
  • GPT-4 generiert Python-Code und Erklärungen, um Bilder zu manipulieren und den Klassifizierer zu täuschen, ohne die Verdachtsmeldungen von AI-Guardian auszulösen.
  • Die Zusammenarbeit zwischen Carlini und GPT-4 unterstreicht das Potenzial von KI-Chatbots als mächtige Verbündete in der Sicherheitsforschung.

Ein Google-Wissenschaftler hat demonstriert, wie OpenAIs GPT-4-LLM (Large Language Model) als Forschungsassistent eingesetzt werden kann, um AI-Guardian zu umgehen, einer Verteidigung gegen adversarische Angriffe auf maschinelle Lernmodelle. Nicholas Carlini, ein Forschungswissenschaftler für Googles Deep Mind, enthüllt in seinem Papier mit dem Titel „A LLM Assisted Exploitation of AI-Guardian“, wie GPT-4 angewiesen wurde, eine Angriffsmethode zu entwickeln, die die Schutzmaßnahmen von AI-Guardian überlistete. Das Experiment zeigt den potenziellen Wert von Chatbots bei der Vorantreibung der Sicherheitsforschung und unterstreicht die Auswirkungen leistungsstarker Sprachmodelle wie GPT-4 auf die Zukunft der Cybersicherheit.

GPT-4 vs. AI-Guardian

Carlinis Forschung untersucht, wie GPT-4, das große Sprachmodell von OpenAI, zur Entwicklung einer Angriffsstrategie gegen AI-Guardian genutzt wurde. In seinem ursprünglichen Design wurde AI-Guardian entwickelt, um adversarische Angriffe zu verhindern, indem Eingaben identifiziert und blockiert wurden, die verdächtige Artefakte enthielten. Carlinis Papier zeigt jedoch, dass GPT-4, wenn es durch Prompts angewiesen wird, die Verteidigungen von AI-Guardian überwinden kann, indem es Skripte und Erklärungen für Bildanpassungen generiert, die einen Klassifizierer täuschen, ohne die Erkennungsmechanismen von AI-Guardian auszulösen.

Carlinis Papier enthält von GPT-4 vorgeschlagenen Python-Code, der die Ausnutzung der Schwachstellen von AI-Guardian ermöglicht. Infolgedessen sinkt die Robustheit von AI-Guardian von 98 % auf bloße 8 % unter dem vom ursprünglichen AI-Guardian-Forschungsteam untersuchten Bedrohungsmodell. Die Autoren von AI-Guardian erkennen den Erfolg von Carlinis Angriff an, ihre Verteidigung zu umgehen.

Basierend auf Carlinis Beobachtungen offenbaren die Forschungsergebnisse die Fähigkeit von GPT-4, die Schutzmaßnahmen von AI-Guardian zu überlisten, was zu einem erheblichen Rückgang seiner Gesamteffektivität führt. Diese überzeugende Demonstration unterstreicht die potenziellen Auswirkungen von KI-Chatbots als einflussreiche Mitwirkende im Bereich der Sicherheitsforschung.

GPT-4 als Co-Autor und Mitarbeiter

Die Zusammenarbeit zwischen GPT-4 und menschlicher Eingabe zeigt die einzigartigen Stärken und Grenzen von KI-Sprachmodellen bei der Unterstützung menschlicher Forscher. GPT-4’s umfangreiches Wissen über veröffentlichte Forschungsarbeiten ermöglicht eine schnelle Codegenerierung, was die Implementierung von Coding-Aufgaben bei angemessener Führung vereinfacht. Seine Fähigkeit, erklärende Texte ohne übermäßigen menschlichen Eingriff zu verfassen, bietet spannende Aussichten, um Forschungsprozesse zu beschleunigen.

Carlini räumt ein, dass die Fähigkeiten von GPT-4 die Notwendigkeit menschlicher Mitarbeiter nicht aufheben. Domänenexperten spielen weiterhin eine kritische Rolle bei der Bereitstellung der richtigen Prompts und der Behebung von Code-bezogenen Problemen. Außerdem ist das Wissen von GPT-4 statisch, auf seine Trainingsdaten beschränkt und fehlt die Fähigkeit zu lernen oder neue Verbindungen zwischen Themen herzustellen. Trotz dieser Einschränkungen sieht Carlini eine Zukunft vor sich, in der ausgefeiltere Sprachmodelle die Forschung weiter erleichtern und es Informatikern ermöglichen, sich auf komplexere Forschungsfragen zu konzentrieren.

Nach Carlinis Einsichten betont die Beteiligung von GPT-4 an dieser Forschung sein Potenzial als effizientes Werkzeug für zeitsparende Coding-Aufgaben. Außerdem könnten Sprachmodelle, während sie fortschreiten, eine erhöhte Autonomie beim Verständnis und der Erkennung von Sicherheitsverteidigungen gewinnen, was den Prozess der Schwachstellenbewertung und -behebung möglicherweise rationalisiert.

Die sich entwickelnde KI-Sicherheitsforschung

Das Experiment, das Nicholas Carlini mit GPT-4 durchgeführt hat, um AI-Guardian zu besiegen, markiert einen bedeutenden Meilenstein in der KI-gesteuerten Aktion. Es zeigt, wie Sprachmodelle als Forschungsassistenten genutzt werden können, um Schwachstellen aufzudecken und Cybersicherheitsmaßnahmen zu verbessern. Während die Fähigkeiten von GPT-4 vielversprechende Aussichten für die Zukunft der Sicherheitsforschung bieten, unterstreicht es auch die Bedeutung menschlicher Expertise und gemeinsamer Anstrengungen. Während KI-Sprachmodelle weiterentwickelt werden, haben sie das Potenzial, das Feld der Cybersicherheit zu revolutionieren und innovative Ansätze zur Abwehr von adversarischen Angriffen zu inspirieren.

Wenn Sie dies lesen, sind Sie bereits einen Schritt voraus. Bleiben Sie mit unserem Newsletter auf dem Laufenden.

Diesen Artikel teilen

Haftungsausschluss. Die bereitgestellten Informationen stellen keine Anlageberatung dar. Cryptopolitan.com übernimmt keine Haftung für Investitionen, die auf Basis der Informationen auf dieser Seite getätigt wurden. Wir empfehlen dringend eine unabhängige Recherche und/oder Beratung durch einen qualifizierten Fachmann, bevor Sie Investitionsentscheidungen treffen.

Aamir Sheikh

Aamir Sheikh

Aamir ist Tech-Journalist mit fast sechs Jahren Erfahrung in der Krypto- und Technologiebranche. Er absolvierte sein Studium an der MAJ University mit einem MBA in Finanzen und Marketing. Heute arbeitet er für Cryptopolitan, wo er über die neuesten Entwicklungen in den Kryptowährungsmärkten und Preisprognosen berichtet.

MEHR … NACHRICHTEN