Analysis
AI SHIFT:

OpenAI تبقي نموذج GPT-Red الهجومي خاصا بعد اختبارات prompt injection

موجز التحرير

أفاد The Next Web بأن OpenAI بنت GPT-Red، وهو نموذج داخلي للاختبار الهجومي الآلي لهجمات prompt injection، لكنها تبقي أداة الهجوم خاصة. وذكر التقرير نسب نجاح تجاوزت 90% ضد نسخة أقدم من GPT-5 وأقل من 23% ضد GPT-5.6، مع بقاء حالات يلتقطها المختبرون البشر.

تمت المراجعة مقابل مواد المصدرتحرير مكتب الذكاء الاصطناعي والمؤسسات في SendTech Times
OpenAI تبقي نموذج GPT-Red الهجومي خاصا بعد اختبارات prompt injection

أفاد The Next Web بأن OpenAI بنت GPT-Red، وهو نموذج داخلي للاختبار الهجومي الآلي صُمم لمهاجمة أنظمة AI أخرى، لكن الشركة لا تعتزم طرح أداة الهجوم للجمهور. ويستهدف النظام هجمات prompt injection، حيث يمكن لتعليمات مخفية في ملفات أو صفحات ويب أو رسائل أن تدفع وكيل AI إلى تنفيذ أفعال لا يريدها المشغل.

تصف OpenAI نموذج GPT-Red كنظام سلامة وليس كمنتج عام. وقال The Next Web إن النموذج يتعلم العثور على طرق لاختطاف أنظمة AI أو تعطيلها حتى يتمكن المطورون من إصلاح الثغرات قبل الإطلاق.

GPT-Red يستهدف هجمات prompt injection

يتدرب GPT-Red عبر self-play ضد نماذج دفاعية، بحسب The Next Web. يحصل نموذج الهجوم على مكافآت عندما ينجح الاستغلال، بينما تحصل نماذج الدفاع على مكافآت عند منع المحاولة.

قالت OpenAI إن التدريب استخدم بعض أكبر عمليات الحوسبة لديها في أعمال السلامة. ووصفت الشركة الحجم بأنه غير مسبوق لهذا الغرض، لكن التقرير لم يذكر تكلفة بالدولار أو عددا للعتاد المستخدم في التدريب.

وجد النموذج أيضا أسلوب prompt injection وصفه باحثو OpenAI بأنه fake chain of thought. وقال Chris Choquette-Choo لـMIT Technology Review إن الهجوم يزرع ملاحظة كاذبة في ذاكرة العمل الخاصة بالنموذج، ما يجعل الهدف يتعامل مع عبارة غير صحيحة وكأنها تحققت سابقا.

اختبار آلة البيع أعطى الهجوم هدفا ماديا

انتقل أحد الاختبارات إلى ما هو أبعد من أمثلة النص فقط. وأفاد The Next Web بأن GPT-Red هاجم Vendy، وهو وكيل AI بنته Andon Labs لإدارة آلة بيع حقيقية في مكتب OpenAI.

غيّر الهجوم الأسعار وخفّض سلعة مرتفعة السعر إلى حد أدنى قدره 50 سنتا وألغى طلب عميل. وقالت OpenAI إنها أفصحت عن الثغرات بعد الاختبار.

توضح الأرقام المنشورة سبب إبقاء OpenAI على أداة الهجوم داخلية. وقال The Next Web إن أكثر من 90% من أقوى هجمات GPT-Red نجحت ضد نسخة أقدم من GPT-5، بينما نجح أقل من 23% ضد GPT-5.6. وفي إعادة لاختبار من عام 2025، كسر GPT-Red نسبة 84% من السيناريوهات مقابل 13% لمختبري الاختراق البشر.

المختبرون البشر لا يزالون يلتقطون حالات فائتة

درّبت OpenAI نموذج GPT-5.6 ضد GPT-Red ووصفته بأنه أكثر أنظمتها صلابة ضد prompt injection، وفقا لـThe Next Web. وتستخدم الشركة أداة الهجوم لتقوية النماذج اللاحقة بدلا من توزيعها كأداة للباحثين الخارجيين.

وتظل الحدود مهمة لفرق السلامة. أفاد The Next Web بأن GPT-Red أضعف في الهجمات الممتدة ذهابا وإيابا وفي المحاولات التي تخفي التعليمات داخل الصور.

قالت Jessica Ji، محللة أمن AI في Georgetown CSET، لـThe Next Web إن الخبرة البشرية ستظل مهمة جدا. ولم تصدر OpenAI نموذج GPT-Red، وقال The Next Web إن الورقة الكاملة كانت لا تزال منتظرة في وقت لاحق من هذا الأسبوع.

شارك هذا المقال
inXf

مقالات ذات صلة

المزيد
OpenAI تدعم خط سلامة للولايات مع اقتراب اختبارات سيبرانية فدرالية
رأس المال والسياسات

OpenAI تدعم خط سلامة للولايات مع اقتراب اختبارات سيبرانية فدرالية

قالت OpenAI إن كاليفورنيا ونيويورك وإلينوي دفعت تشريعات سلامة للذكاء الاصطناعي الحدودي بعناصر مشتركة للإفصاح والإبلاغ عن الحوادث والتدقيق، بينما لا يزال إطار الاختبار السيبراني الفدرالي مستهدفا في أوائل أغسطس.

فوجيتسو تجمع بين OpenAI وAnthropic لدفع الذكاء الاصطناعي المؤسسي
الذكاء الاصطناعي

فوجيتسو تجمع بين OpenAI وAnthropic لدفع الذكاء الاصطناعي المؤسسي

أعلنت فوجيتسو تعاونا مع OpenAI وشراكة استراتيجية مع Anthropic لاستخدام ChatGPT Enterprise وCodex وClaude داخليا وفي خدمات العملاء، مع دمجها مع تقنياتها الخاصة وخبرتها في الأمن والقطاعات.

التجار يرون أن التسوق بالذكاء الاصطناعي قادم، لكن إتمام الدفع لا يزال الحلقة الأضعف
التقنية المالية والمدفوعات الرقمية

التجار يرون أن التسوق بالذكاء الاصطناعي قادم، لكن إتمام الدفع لا يزال الحلقة الأضعف

يضع استطلاع للتجار مرتبط بمؤشر Global Digital Shopping Index لعام 2026 دولة الإمارات العربية المتحدة ضمن اختبار لإتمام الدفع يشمل ثلاث دول. وتواصل تطبيقات الهاتف المحمول ترسيخ موقعها كقنوات بيع، لكن كثيراً من التجار لا يزالون يرون أن تقنيات الدفع، والإسناد، والحماية من الاحتيال تمثل أعمالاً غير مكتملة قبل أن تبدأ وكلاء الذكاء الاصطناعي في التأثير على قرارات الشراء.

هيتاشي تختبر Claude في ذكاء اصطناعي للبنية التحتية الحساسة
الذكاء الاصطناعي

هيتاشي تختبر Claude في ذكاء اصطناعي للبنية التحتية الحساسة

أبرمت هيتاشي شراكة مع أنثروبيك لتعزيز Lumada 3.0 وإدخال Claude في بيئات بنية تحتية حرجة. تشمل الخطة حلول HMAX والأمن السيبراني ونشر Claude بين نحو 290 ألف موظف وتدريب نحو 100 ألف متخصص في الذكاء الاصطناعي. والاختبار الرئيسي هو ما إذا كان الذكاء الاصطناعي التوليدي الموجه للسلامة سيصبح موثوقاً بما يكفي لسير العمل التشغيلي المنظم.

Sysdig تقول إن برمجية الفدية بالذكاء الاصطناعي احتاجت إلى إعداد بشري
الأمن السيبراني

Sysdig تقول إن برمجية الفدية بالذكاء الاصطناعي احتاجت إلى إعداد بشري

وصفت Sysdig عملية JadePuffer بأنها برمجية فدية وكيلة، لكن Michael Clark قال إن إنسانا اختار الضحية وجهز البنية وقدم بيانات اعتماد قاعدة البيانات قبل أن ينفذ وكيل الذكاء الاصطناعي الهجوم.

Socket ترصد 108 حزمة خبيثة في هجوم PolinRider على سلسلة التوريد
الأمن السيبراني

Socket ترصد 108 حزمة خبيثة في هجوم PolinRider على سلسلة التوريد

قالت Socket إنها رصدت 162 إصدارا خبيثا عبر 108 حزمة في حملة PolinRider على سلسلة التوريد. ويسمي التقرير تعرض Go وPackagist وامتداد Chrome لكنه لا يحدد الشركات الضحية.

التالي

المزيد من الأخبار

كل الأخبار
Sheetz تنقل 11,000 آلة افتراضية من VMware بعد تحول تراخيص Broadcomالسحابة ومراكز البيانات16 يوليو 2026Sheetz تنقل 11,000 آلة افتراضية من VMware بعد تحول تراخيص Broadcomأفاد Ars Technica بأن Sheetz تنقل نحو 11,000 آلة افتراضية في 838 موقعا من VMware vSphere إلى StorMagic SvHCI. وأنجزت سلسلة متاجر الراحة نقل أكثر من 600 متجر، لكن التقرير لم يتضمن قيم العقود أو تكاليف تراخيص البرمجيات أو شروط الدعم النهائية.Revolut تضيف موافقة VARA للأصول المشفرة إلى تراخيص المدفوعات في الإماراتالتقنية المالية والمدفوعات الرقمية16 يوليو 2026Revolut تضيف موافقة VARA للأصول المشفرة إلى تراخيص المدفوعات في الإماراتأفاد PYMNTS بأن Revolut حصلت على موافقة أولية من VARA لترخيص VASP في الإمارات، بعد أسابيع من تراخيص المدفوعات من Central Bank of the UAE. ولا تزال الموافقة خاضعة للتوقيع النهائي، ولم تكشف Revolut موعد الإطلاق أو أسعار خدمات الأصول المشفرة أو أعداد العملاء الأوائل.تغيير أمريكي يوسع وصول الإمارات إلى رقائق AI وفق DCDالرقائق وأشباه الموصلات16 يوليو 2026تغيير أمريكي يوسع وصول الإمارات إلى رقائق AI وفق DCDأفاد Data Center Dynamics بأن الحكومة الأمريكية نقلت الإمارات إلى فئة أقل تقييدا في ضوابط التصدير، ما يمنح شركات إماراتية وصولا أوسع إلى رقائق AI المتقدمة من Nvidia وAMD. ويذكر التقرير G42 ومشاريع مراكز بيانات لمزودي السحابة، لكنه لا يسرد كميات الرقائق أو تراخيص معتمدة أو مشاريع إماراتية محددة.Cadence تقدم وكيل AuraStack لتصميم PCB والتغليف المتقدمالرقائق وأشباه الموصلات16 يوليو 2026Cadence تقدم وكيل AuraStack لتصميم PCB والتغليف المتقدمأفاد The Register بأن Cadence Design Systems قدمت AuraStack، وهو نظام ذكاء اصطناعي وكيل لسير عمل PCB والتغليف المتقدم. واستندت Cadence إلى مطالبة إنتاجية تبلغ 15x وذكرت Nvidia بين العملاء، لكن التقرير لم يتضمن الأسعار أو مواعيد التوافر أو القائمة الكاملة للعملاء أو نتائج معيارية مستقلة.Intel تشحن رقائق Panther Lake مصنوعة بتقنية ASML High NA EUVالرقائق وأشباه الموصلات16 يوليو 2026Intel تشحن رقائق Panther Lake مصنوعة بتقنية ASML High NA EUVشحنت Intel معالجات Panther Lake مختارة مصنوعة على Intel 18A باستخدام تقنية ASML High NA EUV، وفق تقرير Interesting Engineering، ما يمنحها بيانات إنتاج بينما لا تزال أسماء العملاء وحجم الشحنات وجدول التوسع غير معلنة.Thinking Machines تطلق نموذج Inkling مفتوح الأوزان مع 975 مليار معاملالذكاء الاصطناعي16 يوليو 2026Thinking Machines تطلق نموذج Inkling مفتوح الأوزان مع 975 مليار معاملأفاد SiliconANGLE بأن Thinking Machines Lab أطلقت Inkling، أول نموذج أساس لها، مع أوزان مفتوحة كاملة وإمكانية fine-tuning عبر Tinker. وذكر التقرير 975 مليار معامل إجمالي، ونحو 41 مليار معامل نشط في الطلب المتوسط، وتدريبا على نحو 45 تريليون رمز، مع بقاء عملاء النشر والتحقق المستقل من الاختبارات غير معلنين.Nokia وNVIDIA تدفعان خارطة AI-RAN نحو اختبارات 2027الرقائق وأشباه الموصلات16 يوليو 2026Nokia وNVIDIA تدفعان خارطة AI-RAN نحو اختبارات 2027أعلنت Nokia منصة RAN أصلية للذكاء الاصطناعي مع تكامل NVIDIA Aerial، وقالت إن مكاسب كفاءة الطيف التي تم عرضها تتجاوز 20%، بينما تبقى أهداف 50% و100% الأكبر مرتبطة بمحطات خارطة الطريق في 2027 و2028.OpenAI تضيف تحليلات استخدام وضوابط إنفاق إلى ChatGPT Workالذكاء الاصطناعي15 يوليو 2026OpenAI تضيف تحليلات استخدام وضوابط إنفاق إلى ChatGPT Workقالت OpenAI إن GPT-5.6 يستخدم رموز إخراج أقل بنسبة 54% ووقتا أقل بنسبة 57% لكل مهمة في مؤشر وكيل برمجي مسمى، بينما تطلب إرشاداتها للمؤسسات من مسؤولي ChatGPT Work إدارة إنفاق الذكاء الاصطناعي عبر النتائج المقبولة وتحليلات الاستخدام وضوابط الحوكمة بدلا من سعر الرمز وحده.IMEC يعرض مسار CMOS 2.0 مع ارتفاع طلب حوسبة الذكاء الاصطناعيالذكاء الاصطناعي15 يوليو 2026IMEC يعرض مسار CMOS 2.0 مع ارتفاع طلب حوسبة الذكاء الاصطناعيقالت CommonWealth Magazine English إن الرئيس التنفيذي الجديد لمعهد IMEC باتريك فانديناميلي عرض مسارا تقنيا مرتبطا بطلب الاستدلال في الذكاء الاصطناعي وتكديس CMOS 2.0 وموقع الذاكرة والروابط الضوئية. ونقلت المقالة تقديره بأن الانتقال من التدريب إلى الاستدلال سيرفع أعباء الحوسبة 150 مرة.Allstate تقول إن Broadcom طلبت أربع عمليات تدقيق بعد الخروج من VMwareرأس المال والسياسات15 يوليو 2026Allstate تقول إن Broadcom طلبت أربع عمليات تدقيق بعد الخروج من VMwareأفادت Ars Technica بأن Allstate اتهمت Broadcom ببدء أربع عمليات تدقيق بعد اختيار شركة التأمين عدم تجديد عقود VMware وCA. ولدى VMware وCA قضيتان منفصلتان ضد Allstate، بينما تترك الملفات حزمة virtualisation الحالية لدى Allstate وتأثير الإنتاج غير معلنين.Oracle تضيف أداة بناء أصلية للذكاء الاصطناعي لتطبيقات Fusion الوكيلةالذكاء الاصطناعي15 يوليو 2026Oracle تضيف أداة بناء أصلية للذكاء الاصطناعي لتطبيقات Fusion الوكيلةقالت Yahoo Tech، نقلا عن Verdict، إن Oracle قدمت أداة بناء أصلية للذكاء الاصطناعي داخل AI Agent Studio for Fusion Applications. وتدعم الأداة مسارات بلا كود ومنخفضة الكود وبرمجية، وتعمل داخل Oracle Fusion Cloud Applications، وتتيح توسيع أكثر من 1,000 وكيل قائم و22 من Fusion Agentic Applications.الحوسبة الكمية في مراكز البيانات تركز على أعباء العمل الهجينة بدل عدد الكيوبتاتالسحابة ومراكز البيانات15 يوليو 2026الحوسبة الكمية في مراكز البيانات تركز على أعباء العمل الهجينة بدل عدد الكيوبتاتأفادت Data Center Knowledge بأن الحوسبة الكمية تتحول نحو أنظمة هجينة تربط QPU ببنية GPU وCPU. وقدرت Hyperion السوق عند $1.4 billion في 2025 وتوقعت نحو $3 billion بحلول 2028، بينما لم تحدد المقالة عملاء إنتاج أو عقود نشر موقعة أو أحمال طاقة على مستوى المنشآت.