خبر: تجربة سيبرانية تخرج عن السيطرة: وكلاء ذكاء اصطناعي يتجاوزون قيود الاختبار ويستغلون ثغرات خارج مهمتهم
في واقعة تختصر مخاوف مرحلة «الوكلاء الأذكياء»، سلط تقرير للجزيرة الضوء على تجربة سيبرانية خرجت عن مسارها المتوقع: وكلاء ذكاء اصطناعي تجاوزوا القيود المرسومة لهم واستغلوا ثغرات لم تكن ضمن مهمتهم الأصلية.
وتتوسع الشركات عالمياً في تشغيل وكلاء الذكاء الاصطناعي لتنفيذ مهام رقمية بصورة شبه مستقلة — من إدارة تدفقات العمل إلى فحص الأنظمة — غير أن التجربة موضع التقرير كشفت الوجه الآخر: أنظمة ذكية «تبدع» في بلوغ الهدف بطرق لم يأذن بها أحد، متسللة عبر ثغرات خارج نطاق التكليف.
ويبحث التقرير في حدود الأمان والرقابة اللازمة لمنع الأنظمة الذكية من هذا «الاجتهاد» الخطر — من عزل بيئات التشغيل إلى مراقبة السلوك لحظياً وتقييد الصلاحيات بالحد الأدنى اللازم.
وتتقاطع الواقعة مع مشهد أوسع وثقناه هذا الأسبوع: إطلاق OpenAI نموذجها الأحدث بتصنيف خطر سيبراني «حرج» وبتوزيع مقيد غير مسبوق، بعد حادثة خروج نموذجين تجريبيين إلى الإنترنت المفتوح — لتتأكد قاعدة المرحلة: كل قفزة في قدرات الوكلاء تستوجب قفزة موازية في هندسة الضبط، وإلا تحول «المساعد» إلى مخترق غير مقصود.