مدونة HisnLabs للأمان

بقلم HisnLabs Security & Research Team · نُشر في · مدة القراءة: 8 دقيقة

Guardrino-t7 v7: رصد قرابة 9 من كل 10 هجمات بالعربية، في نحو 15 مللي ثانية

Guardrino-t7 v7: رصد قرابة 9 من كل 10 هجمات بالعربية، في نحو 15 مللي ثانية

Guardrino-t7 v7 هو النموذج الذي يعمل داخل Guardrino، بوابة أمان الذكاء الاصطناعي التي تبنيها HisnLabs للعربية ولهجاتها والعربيزي والإنجليزية. على مجموعة الاختبار الخاصة بنا رصد 86.5٪ من الهجمات المكتوبة بالعربية، أي 6,814 من 7,874، بعد ضبط عتبة كل نموذج بالطريقة نفسها. واحتاج على معالج حاسوب محمول إلى 14.8 مللي ثانية في المتوسط الوسيط لفحص الرسالة الواحدة.

وعلى الرسائل نفسها، رصدت أدوات الحماية التي بنتها فرق أخرى للعربية ما بين 7.1٪ و25.8٪، ورصدت أداتان معروفتان بُنيتا للإنجليزية 14.3٪ و11.4٪. ونموذج واحد جاء بسرعة نموذجنا: احتاج HARIS إلى 14.5 مللي ثانية مقابل 14.8 مللي ثانية لنموذجنا، وهذا تعادل لا تفوّق. أما نسخة int8 ONNX التي يشغّلها المنتج فاحتاجت إلى 6.7 مللي ثانية.

لماذا العربية؟ في الخليج يكتب الناس إلى البنوك وشركات الاتصالات والجهات الحكومية بالفصحى وباللهجة وبالعربيزي (العربية بحروف لاتينية وأرقام) وبالإنجليزية، وكثيرًا ما يجمعونها في رسالة واحدة. وحقن الأوامر، الذي تضعه OWASP في رأس قائمتها لعام 2025 لتطبيقات النماذج اللغوية تحت الرمز LLM01، يعمل بكل هذه الأشكال [10]. وأداة حماية لم تُختبر إلا بالإنجليزية تترك معظم هذه الرسائل بلا فحص، وأداة أبطأ من أن تقف أمام كل رسالة لن يشغّلها أحد.

في هذا التقرير:

الهجمات المرصودة مقابل زمن فحص الرسالة

مخطط نقطي يقابل بين نسبة الهجمات العربية المرصودة وزمن فحص الرسالة الواحدة لستة نماذج. يقع Guardrino-t7 v7 عند 86.5٪ و14.8 مللي ثانية، وتقع النماذج الخمسة الأخرى بين 7.1٪ و25.8٪.
كلما ارتفعت النقطة رصد النموذج أكثر، وكلما اتجهت يمينًا كان أسرع (مقياس لوغاريتمي). كل نقطة نموذج واحد عند عتبته المضبوطة على حظر رسالة آمنة واحدة من كل مئة.

يُقرأ المخطط على المحورين معًا. فأداة الحماية تستطيع أن ترصد أكثر إذا حظرت أكثر، وتستطيع أن تكون سريعة إذا فحصت أقل. وما تحتاجه البوابة هو الأمران معًا: نسبة رصد عالية ضمن حدّ ثابت للحظر الخاطئ، وزمن فحص قصير يكفي لتقف أمام كل طلب. HARIS بسرعة Guardrino-t7 v7 هنا، لكنه يرصد 7.1٪ من هذه الهجمات العربية.

كيف يفحص Guardrino الرسالة

رسم توضيحي: تمرّ الرسالة بطبقة التنظيف L0، ثم القواعد L1، ثم نموذج Guardrino-t7 في الطبقة L2، ثم القرار: سماح أو إخفاء أو حظر. المثال سؤال مصرفي لا ضرر فيه برقم هاتف وهمي: يُقرأ بلا تطويل ولا تشكيل، ويُخفى الرقم، ولا يُعثر على هجوم، فيُخفى الرقم ثم يُسمح بالرسالة.

Guardrino-t7 v7 طبقة واحدة من ثلاث. تصنع الطبقة L0 نسخًا منظَّفة من الرسالة للفحص: بلا تطويل ولا تشكيل ولا أحرف خفية، مع قراءة العربيزي بالحرف العربي، ولا تغيّر أبدًا ما يُمرَّر إلى النموذج. وتطبّق الطبقة L1 القواعد: البيانات الشخصية الخليجية والأسرار، وتواقيع الهجمات المعروفة، والروابط. أما L2 فهو النموذج الذي يقيسه هذا التقرير. ثم تقرّر البوابة: تسمح بالرسالة، أو تخفي ما لا يجوز أن يخرج منها، أو تحظرها.

يقيس هذا التقرير الطبقة L2 وحدها، رسالةً رسالة، لتمكن مقارنتها بالمصنِّفات الأخرى. وتضيف البوابة فوقها الطبقات الأخرى وذاكرة المحادثة وفحص الردود.

مجموعة الاختبار

مجموعة الاختبار من إعداد HisnLabs: 13,249 هجمة و31,348 رسالة آمنة من 63 مصدرًا، وأغلبها بالعربية. وهي جزء الاختبار من البيانات التي بُني منها Guardrino-t7 v7: أُبعدت عن التدريب، لكنها مأخوذة من المصادر نفسها. وهذا يميل لصالح نموذجنا، وهو السبب الرئيس في أن هذا الاختبار ليس مستقلًّا.

اللغة كما هي موسومة في ملف الاختبار. تُحسب رسائل العربيزي تحت وسم اللغة الخاص بكل صف.
اللغةالهجماتالرسائل الآمنة
العربية (بالحرف العربي)7,87427,482
الإنجليزية5,2483,865
أخرى أو مختلطة1001
الفرنسية270
المجموع13,24931,348
الصفوف التي تحمل وسم لهجة. بعض الصفوف بلا وسم، وقليل منها يحمل وسمًا آخر.
وسم اللهجةالهجماتالرسائل الآمنة
الخليجية1,91813,426
المصرية1,8342,642
الشامية5591,367
المغاربية6542,930
الفصحى2,5263,456
العراقية91,361
السودانية62182

الرسائل الآمنة هي النص العادي الذي يصل إلى مساعد ذكي في الخليج: تغريدات، وطلبات إلى مساعد صوتي، وأسئلة، ومحادثات، وأكثرها باللهجة الخليجية، حتى يدخل في الاختبار النص البريء الذي يبدو غريبًا فحسب. وتعدّ المقارنة أيضًا الهجمات المكتوبة بالعربيزي وحدها: 1,523 هجمة.

أكبر المصادر من حيث عدد الصفوف، بأسمائها في ملف الاختبار؛ وجُمعت بقية المصادر في الصف الأخير.
المصدرالهجماتالرسائل الآمنة
gulf-tweets07,292
arabic-guardrail2,2712,216
massive-ar-sa03,124
aya02,598
embedded-v6957957
da-mmlu01,892
spml985815
in-the-wild6301,049
bipia-clean01,439
bipia1,2970
mosscap1,1540
oasst201,016
51 مصدرًا آخر5,9558,950

مصدر واحد يستحق التنبيه. يقدّم arabic-guardrail إلى مجموعة الاختبار 2,271 هجمة و2,216 رسالة آمنة. وهو مصدر عام، فربما دُرّبت عليه نماذج أخرى، وكان جزء التدريب منه ضمن بيانات تدريبنا. لذلك نعرض النتائج معه ومن دونه (انظروا النتائج).

النماذج التي قارنّاها

ستة نماذج من النوع نفسه: مصنِّف يقرأ رسالة واحدة ويقدّر احتمال أن تكون هجومًا على الأوامر. ولم يدخل هذه المقارنة أي «حَكَم أمان»، أي نموذج يقيّم ما إذا كان المحتوى ضارًّا. نُزّلت النماذج الخارجية من Hugging Face وشُغّلت كما نُشرت.

الجهة الناشرة: حساب Hugging Face الذي نُزّل منه كل نموذج خارجي. لم يُنشر Guardrino-t7 v7؛ المنشور نسخة أقدم منه هي Guardrino-t7 Open.
النموذجالجهة الناشرةالنوعبُني لـ
Guardrino-t7 v7HisnLabsمصنِّف لهجمات الأوامرالعربية ولهجاتها والعربيزي والإنجليزية
Ara-Prompt-Guard V1NAMAA-Spaceمصنِّف لهجمات الأوامرالعربية
ArabGuardd12o6aaمصنِّف لهجمات الأوامرالعربية المصرية
HARISZKLogicمصنِّف لهجمات الأوامرالعربية
Prompt Guard 2meta-llamaمصنِّف لهجمات الأوامرالإنجليزية
Protect AI v2protectaiمصنِّف لهجمات الأوامرالإنجليزية

النتائج والمنهجية

مجموعة الاختبار الخاصة بنا: 7,874 هجمة عربية و31,348 رسالة آمنة. ضُبطت العتبات على عيّنة تحقّق لتحظر رسالة آمنة واحدة من كل 100. الأزمنة لكل رسالة على معالج Apple M1 Max واحد، دفعة من 1، و300 رسالة عربية.
النموذجالهجمات العربية المرصودةالرسائل الآمنة المحظورةالزمن الوسيطالزمن عند المئين 95
Guardrino-t7 v786.5٪ (6,814 من 7,874)2.6٪14.8 مللي ثانية30.9 مللي ثانية
Guardrino-t7 v7 بمعدّل الحظر الخاطئ لـ ArabGuard82.8٪ (6,520 من 7,874)1.7٪النموذج نفسهالنموذج نفسه
Guardrino-t7 v7 بصيغة int8 ONNX (نسخة المنتج)لم يُعَد قياسهلم يُعَد قياسه6.7 مللي ثانية23.2 مللي ثانية
Ara-Prompt-Guard V125.8٪ (2,033 من 7,874)2.0٪66.5 مللي ثانية152.5 مللي ثانية
ArabGuard19.7٪ (1,553 من 7,874)1.7٪32.4 مللي ثانية51.0 مللي ثانية
HARIS7.1٪ (561 من 7,874)1.5٪14.5 مللي ثانية28.1 مللي ثانية
Prompt Guard 214.3٪ (1,128 من 7,874)2.8٪61.9 مللي ثانية110.9 مللي ثانية
Protect AI v211.4٪ (894 من 7,874)1.9٪65.8 مللي ثانية114.9 مللي ثانية
مخطط أعمدة للهجمات العربية المرصودة: Guardrino-t7 v7 ‏86.5٪، والنموذج نفسه بمعدّل الحظر الخاطئ لـ ArabGuard ‏82.8٪، ثم Ara-Prompt-Guard V1 25.8٪، ArabGuard 19.7٪، Prompt Guard 2 14.3٪، Protect AI v2 11.4٪، HARIS 7.1٪.

الحظر الخاطئ عندنا أعلى منه عند معظم النماذج. فقد ضُبطت كل العتبات لتحظر رسالة آمنة واحدة من كل 100 على عيّنة التحقّق، لكن Guardrino-t7 v7 حظر على مجموعة الاختبار 2.6٪ من الرسائل الآمنة، أي 804 من 31,348. لذلك نعرضه أيضًا بعتبة أشدّ، ضُبطت بحيث لا يحظر من الرسائل الآمنة أكثر مما يحظره ArabGuard: 519 من 31,348. وعندها يبقى يرصد 82.8٪ من الهجمات العربية، مقابل 19.7٪ لـ ArabGuard.

مخطط أعمدة للزمن الوسيط لفحص الرسالة مع المئين 95: Guardrino-t7 v7 بصيغة int8 ‏6.7 مللي ثانية، ثم HARIS 14.5 مللي ثانية، Guardrino-t7 v7 14.8 مللي ثانية، ArabGuard 32.4 مللي ثانية، Prompt Guard 2 61.9 مللي ثانية، Protect AI v2 65.8 مللي ثانية، Ara-Prompt-Guard V1 66.5 مللي ثانية.

السرعة: احتاج Guardrino-t7 v7 إلى 14.8 مللي ثانية وسيطًا للرسالة، و30.9 مللي ثانية عند المئين 95. واحتاج HARIS إلى 14.5 مللي ثانية، فالنموذجان متعادلان. واحتاجت النماذج الأخرى ما بين 32.4 مللي ثانية و66.5 مللي ثانية.

ويشغّل المنتج نسخة int8 ONNX من النموذج نفسه [9]، واحتاجت إلى 6.7 مللي ثانية وسيطًا (23.2 مللي ثانية عند المئين 95). لم نُعِد قياس نسبة الرصد لهذه النسخة على مجموعة الاختبار. ما قسناه بدلًا من ذلك: على 1,000 صف، تعطي نسخة int8 الحكم نفسه الذي يعطيه النموذج كامل الدقة في 98.7٪ منها.

حسب اللهجة

مخطط أعمدة لنتائج Guardrino-t7 v7 حسب اللهجة: الخليجية 86٪، المصرية 86٪، الشامية 97٪، المغاربية 95٪، الفصحى 83٪.
الاختبار نفسه والعتبة نفسها. الهجمات التي لا تحمل وسم لهجة تُحسب في مجموع العربية فقط.
اللهجةالهجمات العربية في المجموعةما رصده Guardrino-t7 v7
الخليجية1,91886٪ (1,642 من 1,918)
المصرية1,83486٪ (1,573 من 1,834)
الشامية55997٪ (540 من 559)
المغاربية65495٪ (624 من 654)
الفصحى2,52683٪ (2,102 من 2,526)

يرصد النموذج الهجمات الخليجية والمصرية بنسبة متقاربة، والفصحى أدنى اللهجات الخمس. أما مجموعتا الشامية والمغاربية فصغيرتان، 559 و654 هجمة، وبضع عشرات من الرسائل تكفي لتحريك نتيجتيهما، فاقرؤوهما مؤشرًا تقريبيًّا.

كيف قسنا

  • الرسائل نفسها لكل النماذج: 13,249 هجمة و31,348 رسالة آمنة، اختُبرت بين 2026-10-26 و2026-10-27.
  • قاعدة العتبة نفسها لكل النماذج: يعطي المصنِّف درجة، وتحوّلها العتبة إلى حظر أو سماح. ضُبطت عتبة كل نموذج على عيّنة تحقّق منفصلة لتحظر رسالة آمنة واحدة من كل 100، ثم طُبّقت كما هي على مجموعة الاختبار. فالمقارنة بالعتبات الافتراضية لا تقيس في الغالب إلا مدى تشدّد كل نموذج.
  • الجهاز نفسه لكل النماذج: Apple MacBook Pro بمعالج Apple M1 Max، على المعالج المركزي بـ4 خيوط، رسالة واحدة في كل مرة (دفعة من 1)، و300 رسالة عربية من القصيرة إلى الطويلة بعد 50 رسالة للإحماء، بتاريخ 2026-10-27. ويشمل الزمن تقطيع النص وتشغيل النموذج وحساب الدرجة.
  • كان الجهاز يشغّل في الوقت نفسه مهمة تدريب، لذا فالأزمنة المطلقة أعلى منها على جهاز متفرّغ؛ لكن كل النماذج عملت تحت الحِمل نفسه، واحدًا تلو الآخر، ثم مرة ثانية بالترتيب المعاكس. ولم يتغيّر الزمن الوسيط بين المرّتين بأكثر من 2.0 مللي ثانية.
  • من دون المصدر المتداخل arabic-guardrail، يرصد Guardrino-t7 v7 ‏4,596 من 5,603 هجمة عربية (82٪).
  • كل الأعداد موجودة في ملف البيانات، فيستطيع أيّ أحد أن يعيد حساب النسب.

الحدود

  • هذا اختبارنا نحن، لا اختبار مستقل. مجموعة الاختبار أغلبها بالعربية وقريبة من البيانات التي دُرّب عليها Guardrino، وهذا يميل لصالح نموذجنا. ونرحّب باختبار مستقل.
  • الحظر الخاطئ ينزاح. ضُبطت العتبات على رسالة واحدة من كل 100 في عيّنة التحقّق، لكنه بلغ عندنا 2.6٪ على مجموعة الاختبار. وهذا أحد أسباب بدء التجربة في وضع المراقبة، حيث يُفحص الحظر الخاطئ على رسائلكم الآمنة قبل أن يُحظر أي شيء.
  • النماذج الخارجية بُنيت للإنجليزية، أو للهجة واحدة، أو للفصحى أساسًا. ويبيّن هذا الاختبار ما يحدث حين تواجه نصًّا لم تُبنَ له، وليس حكمًا على تلك النماذج.
  • قد يتداخل مصدر عام مع بيانات التدريب، بياناتنا وبيانات الفرق الأخرى؛ ومن دونه تبلغ نسبة الرصد عندنا 82٪.
  • قيست السرعة على معالج حاسوب محمول واحد تحت حِمل. وستعطي أجهزتكم وأطوال رسائلكم وأحجام دفعاتكم أرقامًا أخرى.
  • قيس زمن نسخة int8 التي يشغّلها المنتج، لكن نسبة رصدها لم يُعَد قياسها؛ فهي توافق النموذج المقيس في معظم الصفوف لا في كلها.
  • يقيس هذا التقرير نموذجًا واحدًا على رسائل منفردة. أما الهجمات الموزّعة على عدة رسائل، وطبقات البوابة الأخرى، فخارج هذا الاختبار.
  • Guardrino قيد التطوير ويُقدَّم عبر تجارب في وضع المراقبة. وهذه نتائج إصدار واحد من النموذج، لا وعد بشأن حركة بياناتكم.

الخطوة التالية

الإصدار 8 قيد التدريب الآن، ويضيف رؤوسًا لسلامة المحتوى العربي، ليستطيع النموذج نفسه أن ينبّه إلى المحتوى الضار، لا إلى محاولات التلاعب بالمساعد فقط. لا نتائج له بعد، ولن نخمّنها. وسيتّبع تقريره المنهجية نفسها، بمجموعة الاختبار نفسها والجهاز نفسه، أيًّا كانت نتائجه.

اطّلعوا على البيانات، أو جرّبوه على رسائلكم

اطلب تجربة: يعمل Guardrino في وضع المراقبة على رسائلكم ويبيّن ما كان سيفعله، دون أن يحظر شيئًا حتى تقرّروا. اطّلع على البيانات: في صفحة المقارنة كل الأعداد والمنهجية والحدود، ومعها ملف البيانات (JSON).

وثلاثة أدلة تتعمّق أكثر: حواجز أمان النماذج اللغوية بالعربية، وحماية الذكاء الاصطناعي للبنوك والاتصالات والحكومة في الخليج، وحقن الأوامر بالعربية. ونسخة أقدم وأصغر من النموذج متاحة مفتوحة على Hugging Face باسم Guardrino-t7 Open [3]، وعلى بطاقتها هذه المقارنة؛ أما الإصدار v7 فتحتفظ به HisnLabs للبوابة.

دور Guardrino وHisnLabs

Guardrino هو البوابة التي تبنيها HisnLabs لتتمكّن الشركات في الخليج من فحص ما تقرؤه مساعداتها الذكية وما تقوله، بالعربية ولهجاتها والعربيزي والإنجليزية. ما زال قيد التطوير، والتجربة في وضع المراقبة تشغّله على حركة بياناتكم دون أن يحظر شيئًا حتى تقرّروا.

المصادر