Kimi K3 يتخلف عن النماذج الحدودية الأمريكية في مهام الهجوم السيبراني، تجد مختبرات المملكة المتحدة والولايات المتحدة

أفادت تقرير تقييم مشترك بأن Kimi K3 الخاص بـ Moonshot AI ليس على قدم المساواة مع أقوى أنظمة الذكاء الاصطناعي الأمريكية عندما يتعلق الأمر ببناء استغلاالات البرمجيات وتشغيل هجمات الشبكات المحاكية. 

أجرى معهد أمان الذكاء الاصطناعي في المملكة المتحدة (AISI) ومركز معايير وابتكار الذكاء الاصطناعي في الولايات المتحدة (CAISI) التقييم، ونشروا نتائجهم في 23 يوليو.

من المتوقع أن تفتح Moonshot الأوزان الكاملة للنموذج للجمهور في 27 يوليو، وتشير النتائج إلى أن ضوابط Kimi K3 لم تفعل شيئاً لمنعها من المساعدة في العمل السيبراني الهجومي.

ماذا اكتشف التقييم المشترك حول Kimi K3؟

ال أجرى معهدان تقييماً لـ Kimi K3 من خلال ExploitBench، وهو اختبار من جامعة كارنيجي ميلون يقيس مدى قدرة النموذج على دفع استغلال ثغرة حتى الاكتمال. يعتمد على 41 ثغرة تم العثور عليها في محرك V8 الخاص بـ Chrome بعد عام 2023. حصل Kimi K3 على 32 في المئة. بلغ متوسط النماذج الرائدة من الولايات المتحدة 76.2 في المئة، وجاءت GLM-5.2 من الصين في المرتبة 24 في المئة.

تنفيذ التعليمات البرمجية التعسفية، التي تمنح المهاجم تحكماً كاملاً في جهاز الهدف، هي النتيجة الأكثر خطورة في المعيار. وصلت النماذج الأمريكية إلى ذلك في 20 من أصل 41 مهمة في المتوسط. لم يصل Kimi K3 إلى ذلك في أي منها.

فشلت GLM-5.2 أيضاً في الوصول إلى هناك. لذلك، بينما يتصدر Kimi K3 الآن المنافسين ذوي الأوزان المفتوحة في القدرة السيبرانية، فإنه يتخلف عند النقطة التي قد يسبب فيها هجوم حقيقي أكبر ضرر.

في منتصف الطريق عبر اختراق شبكة 32-خطوة

الاختبار الثاني، المسمى "The Last Ones"، يضع النموذج في شبكة مؤسسية محاكاة مع حوالي 20 مضيفاً موزعة عبر أربعة شبكات فرعية. 

سيستغرق الأمر من متخصص بشري حوالي 20 ساعة للعمل على المسار الكامل المكون من 32 خطوة. بلغ متوسط Kimi K3 الخطوة 17، بينما بلغ متوسط أكثر النماذج الأمريكية قدرة 28.5، وحققت GLM-5.2 11.

ومع ذلك، لاحظ المقيمون أن Kimi K3 أكمل السلسلة بأكملها مرة واحدة من بين عشر محاولات وبقي تحت سقف 100 مليون رمز الذي وضعه المقيمون. 

حققت أفضل النماذج الأمريكية ذلك ست أو سبع مرات من بين عشر. قرأ المعهد هذا النجاح الوحيد كدليل على أن النموذج لديه القدرة؛ ومع ذلك، لا يمكنه استدعاؤها عند الطلب. لاحظوا أن النطاق لا يحتوي على مدافعين نشطين ومسار مدمج للوصول إلى الهدف، مما يميل لصالح أي مهاجم.

هل يمتلك Kimi K3 ضوابط تمكّنه من قول لا؟

أشار المقيمون إلى أن استعداد النموذج لتنفيذ المهام دون معارضة كان خطراً كبيراً. صرحوا: "Kimi K3 قادر على مهاجمة أنظمة المؤسسات الصغيرة ذات الدفاع الضعيف والمعرضة للخطر بشكل مستقل عند توجيهه للقيام بذلك ومنحه وصولاً أولياً إلى الشبكة". 

حذر AISI سابقاً من أن القدرة المتزايدة للنماذج المفتوحة تخلق "خطراً مستمراً ولا رجعة فيه لسوء الاستخدام". بمجرد أن تصبح أوزان Kimi K3 عامة في 27 يوليو، لن يكون سلوكها قابلاً للحجز من قبل أي شخص يستضيفها.

لماذا تتخلف درجات Kimi K3 السيبرانية مقارنة بدرجاتها العامة؟

قبل هذا التقرير، كان لـ Kimi K3 معايير أداء عامة قوية، ولم يتغير ذلك؛ ومع ذلك، سلط الضوء على نقاط ضعفه عندما تم اختبار قدراته السيبرانية. reportedly تجاوز النموذج الصيني ذو 2.8 تريليون معلمة Claude 4.8 و GPT-5.5 وتصدر أيضاً بعض لوحات المتصدرين.

وفقاً للمعاهدات، قد يكون هذا ممكناً نتيجة لكيفية بناء النموذج.

مدير العلوم في البيت الأبيض اتهم مايكل كراتسيوس Moonshot في 22 يوليو بتقطيع نموذج Fable الخاص بـ Anthropic، باستخدام مخرجاته كبيانات تدريب. 

تصنيفات Anthropic تحجب أوامر الهجوم السيبراني المتقدمة. هذا يعني أن مجموعة تدريب يتم كشطها من استجابات Claude لن توفر ما يكفي من المواد حول هذه المهارات بالضبط. 

لا يحتوي Kimi K3 على هذه التصنيفات، مما مكنه من مطابقة النماذج الغربية في الأعمال العامة بينما لا يزال يتخلف في القدرة على الاستغلال.