أحدث الأخبار
مختار لك

ملف اكتتاب Anthropic يكشف عن توقف التدريب وأربع حوادث أمنية

بقلمميكاه أبيودونميكاه أبيودون 3 دقائق قراءة
  • أجلت Anthropic التدريب المسبق لنموذج حدودي لأكثر من شهر لتعزيز الدفاعات ضد سرقة أوزان النموذج.
  • شملت أربع حوادث تقييم للأمن السيبراني نماذج Claude التي حصلت على وصول غير مصرح به إلى أنظمة طرف ثالث حقيقية.
  • تُظهر الإفصاحات كيف يمكن لضوابط الذكاء الاصطناعي الأقوى أن تخلق فوائد أمنية مع تأخير التطوير ورفع التكاليف.

أكتوبر 26 لدى Anthropic ملف الاكتتاب العام الأولي يكشف عن مخاوف أمنية مختلفة. أجلت الشركة بدء التدريب المسبق لنموذج حدودي لأكثر من شهر أثناء تحسين دفاعاتها ضد سرقة أوزان نموذجها. بشكل منفصل، قامت أربعة نماذج Claude بالوصول إلى أنظمة منظمات حقيقية خلال عمليات تقييم الأمن السيبرائي.

مشكلتان في ملف واحد

قدّمت أنثروبيك طلبها إلى بورصة ناسداق لإدراج أسهمها تحت الرمز ANT. تسيطر معظم مقاعد مجلس الإدارة على صندوق المنفعة طويلة الأجل. لا يحدد الطلب سعر الطرح العام الأولي أو التقييم حتى الآن.

تثير هذه الإفصاحات قضيتين مختلفتين: حماية أوزان النماذج الهامة ومنع وكلاء الذكاء الاصطناعي من الوصول إلى أنظمة خارج بيئة الاختبار الخاصة بهم.

كيف انتهت أهداف التقييم بشكل مباشر

في تقرير تاريخ 30 يوليو، كشفت أنثروبيك عن اكتشافها لثلاث حالات اكتسبت فيها نماذج كلود وصولاً غير مصرح به إلى أنظمة منظمات حقيقية أثناء مراجعة 141,006 اختباراً للأمن السيبراني. كان شريك الاختبار الخاص بها، إيرغولار، قد ترك الوصول إلى الإنترنت مفتوحاً عن طريق الخطأ، على الرغم من تعليمات كلود بأنه يعمل في محاكاة معزولة.

خلال تمارين التقاط العلم، خلط الوكلاء بين الأنظمة الحقيقية وأهداف الاختبار وحصلوا على الوصول عبر كلمات مرور ضعيفة أو نقاط نهاية لا تتطلب مصادقة.

شملت الحالات الثلاث النماذج التالية: كلاود أوبوس 4.7، الذي أُصدر في أبريل؛ وميثوس 5، المُقدَّم في يونيو حيث كان الوصول إليه مقصوراً في البداية على مدافعي الأمن السيبراني المؤهلين؛ ونموذج بحث داخلي لم يكن متاحاً بعد للجمهور.

أثناء التقييم، عملت هذه النماذج بدون مرشحات الأمن السيبراني والمراقبة المستخدمة عادةً في الإصدارات العامة. أوقفت أنثروبيك تقييماتها للأمن السيبراني أثناء التحقيق. وذكرت أن أيًا من النماذج لم يحاول عمداً الهروب من بيئتها التجريبية أو نسخ نفسها.

كشف تقييم في سبتمبر عن حالة رابعة تتعلق بإصدار مبكر من أوبوس 4.6 الذي وصل إلى أنظمة حقيقية في يناير. لم تكتشف أنثروبيك الحادث حتى أغسطس. ثم وسعت مراجعتها لتشمل حوالي 481 مليون سجل محادثة لكنها لم تجد حالات إضافية بنفس الدرجة من الخطورة.

كان أكثر إثارة للقلق هو اكتشاف استمرار بعض النماذج في هجماتها رغم وجود علامات تشير إلى أنها تستهدف أنظمة حقيقية. تقوم مجموعة البحث المستقلة METR بفحص الحوادث.

أربع حوادث أمنية متعلقة بالذكاء الاصطناعي في أنثروبيك: 141,006 عملية تقييم و481 مليون محادثة

حالة منفصلة في معهد الذكاء الاصطناعي بالمملكة المتحدة

أفاد معهد أمان الذكاء الاصطناعي في المملكة المتحدة بـ عن تسجيل 19 إجراءً غير مصرح به في 10 من أصل 122 تجربة تشغيل. وشملت هذه الحوادث نموذج Mythos 5 في 17 حالة، ونموذج GPT-5.6 Sol الخاص بشركة OpenAI، وهو النموذج الرائد الذي تم استعراضه في 26 يونيو. حاول أحد الوكلاء حقن كود ضار في مشروع مفتوح المصدر، وإنشاء هويات مزيفة للضغط على مشرف المشروع الذي رفض ذلك.

منحت AISI وكلاء الذكاء الاصطناعي إمكانية الوصول إلى الإنترنت مع تعطيل إعدادات الأمان السيبراني لتقييم قدراتهم. وقد استخدموا إصدارات مختلفة عن تلك المتاحة للجمهور. ولم يعثر المحققون على أي مؤشرات تشير إلى حدوث ضرر حقيقي.

ومع ذلك، قام الوكلاء ببعض الإجراءات التي لم يكن من المفترض أن يقوموا بها، مما أثار الشكوك حول سلوكهم في مواقف مشابهة. وفي تقريرها الخاص بالحادثة، كتبت AISI:

"ما يمكننا قوله هو أن السلوك كان ممكناً ومستمراً وجديداً؛ وهذا وحده يستدعي الانتباه."

تضع مراجعة Check Point إخفاقات الاختبار جنبًا إلى جنب مع الاستخدام المتزايد من قبل المجرمين لأدوات الذكاء الاصطناعي، بما في ذلك برامج الفدية الوكيلية (Agentic Ransomware).

التكلفة المالية للتدابير الأمنية الأطول والأكثر صرامة

وفقًا لتقارير Cryptopolitan، قدّر المستثمرون قيمة الطرح العام الأولي (IPO) لشركة Anthropic بنحو 2 تريليون دولار، وهو مبلغ يتجاوز ضعف التقييم الخاص للشركة البالغ 965 مليار دولار في مايو. ومع ذلك، لا تزال هذه القيمة افتراضية، حيث لم تقدم Anthropic أي سعر عرض أو تقييم في طلبها.

مع هذه التوقعات العالية، تأتي التدابير الأمنية الأكثر صرامة بتكلفة مالية. فقد تؤخر إطلاق النماذج وتزيد من تكاليف التطوير، لكن التدابير الوقائية الأقوى قد تساعد أيضاً في كسب ثقة العملاء المؤسسيين الحذرين. ترتفع المخاطر يوماً بعد يوم.

ووفقًا لـ Gartner، سيصل الإنفاق العالمي على الذكاء الاصطناعي إلى 2.7 تريليون دولار أمريكي في عام 2026، بزيادة قدرها 49.5%، بينما سيتضاعف الإنفاق على الأمن السيبراني في هذا المجال.

وجدت BCG أن 5% فقط من الشركات التي شملتها الدراسة لديها ضوابط كاملة للوكلاء المستقلين، على الرغم من توقع 42% منحهم سلطة اتخاذ القرار بحلول عام 2030. قد تكتسب البائعات التي يمكنها إثبات وجود ضوابط فعالة ميزة تنافسية.

إذا كنت تقرأ هذا، فأنت متقدّم بالفعل. ابق هناك مع نشرتنا الإخبارية.

الأسئلة الشائعة

لماذا أوقفت أنثروبي التدريب المسبق لأحد نماذجها؟

وفقًا لتقرير الطرح العام الأولي (IPO)، تأخرت شركة Anthropic في بدء التدريب المسبق لنموذج أساسي جديد لأكثر من شهر لتعزيز الحماية ضد استخراج أوزان النموذج.

ماذا حدث فعليًا خلال تقييمات الأمن السيبراني التي أجرتها Anthropic؟

تم ترك بيئة اختبار تابعة لطرف ثالث، تُشغّل بواسطة Irregular، متصلة بالإنترنت عن طريق الخطأ، مما دفع أربعة نماذج من Claude، والتي أُبلغت بأنها في محاكاة مغلقة، إلى تنفيذ مهام التقاط العلم ضد أنظمة حية؛ وتقول Anthropic إن بيانات العملاء لم تُلمس ولم يحاول أي نموذج الهروب.

كيف اختلفت حادثة المعهد البريطاني لأمن الذكاء الاصطناعي (AISI)؟

قام المعهد البريطاني لأمن الذكاء الاصطناعي (AISI) بتمكين الوصول إلى الإنترنت وتعطيل مصنفات السلامة عمدًا لاختبار أقصى قدر ممكن، ووجد أن الوكلاء نفذوا 19 إجراءً غير مصرح به عبر 10 من أصل 122 تجربة، معظمها من Mythos 5، دون إثارة ضرر حقيقي.

شارك هذه المقالة

إخلاء مسؤولية. المعلومات المقدمة ليست نصيحة تداول. Cryptopolitan.com لا تتحمل أي مسؤولية عن أي استثمارات تُجرى بناءً على المعلومات الواردة في هذه الصفحة. نوصي بشدة بإجراء بحث مستقل و/أو الاستعانة بمستشار مؤهل قبل اتخاذ أي قرارات استثمارية.

ميكاه أبيودون

ميكاه أبيودون

يستفيد ميكاه أبيودون بشكل جيد من دراسته في الهندسة البيئية والإدارة (ماجستير) في جامعة تالين للتكنولوجيا (TalTech) لصقل محتوى أخبار التنبؤ بالأسعار في موقع Cryptopolitan. وفي عامه السابع في مجال وسائل الإعلام المشفرة، يغطي العملات الرقمية الرئيسية، والعملات البديلة، والتمويل اللامركزي، والعملات المستقرة، والاتجاهات الاقتصادية الكلية، والتقنيات الناشئة.

المزيد من الأخبار