الدرس 5 من 5 · 7 دقيقة
مسرد: مصطلحات حواجز حماية الذكاء الاصطناعي بالعربية والإنجليزية والفرنسية
الكلمات التي ستصادفها عند اختيار حاجز حماية للذكاء الاصطناعي أو تشغيله، من التشكيل والعربيزي إلى حقن الأوامر والحجب الخاطئ ونطاقات الثقة، كل منها باسمه الإنجليزي والفرنسي وشرح بسيط.
الفرق التي تختار حواجز الحماية وتشغّلها تعمل غالبًا بعدة لغات: تُناقَش السياسة بالعربية، ويكتب المورّد بالإنجليزية، وتصل إرشادات الجهة التنظيمية بالفرنسية أو الإنجليزية. يعطي هذا المسرد كل مصطلح اسمه المعتاد باللغات الثلاث وجملة شرح بسيطة، حتى يقصد الجميع في الاجتماع الشيء نفسه.
| العربية | English | Français | المعنى |
|---|---|---|---|
| حاجز حماية | Guardrail | garde-fou | نقطة تفتيش بين الناس أو الوكلاء ونموذج الذكاء الاصطناعي، تطبّق قواعد المؤسسة على ما يدخل وما يخرج. |
| فحص المدخلات / فحص المخرجات | Input check / output check | contrôle en entrée / en sortie | فحص المدخلات ينظر فيما يُرسل إلى النموذج (الرسائل والمستندات ونتائج الأدوات)؛ وفحص المخرجات ينظر في الجواب، ويُفضَّل أثناء ظهوره. |
| حقن الأوامر | Prompt injection | injection de prompt | نص يحاول أن يستبدل بتعليمات تطبيق الذكاء الاصطناعي تعليماتِ المهاجم. |
| حقن الأوامر غير المباشر | Indirect prompt injection | injection de prompt indirecte | حقن أوامر مخبّأ في محتوى يقرؤه الذكاء الاصطناعي نيابة عن أحد: مستند أو صفحة ويب أو بريد أو نتيجة أداة أو رسالة وكيل آخر. |
| كسر القيود | Jailbreak | jailbreak (contournement) | أسلوب لجعل النموذج يتخلى عن سلوك السلامة: تقمّص دور، أو إطار خيالي، أو نص مرمَّز، أو طلب موزّع على عدة رسائل. |
| محتوى ضار | Harmful content | contenu préjudiciable | طلب أو جواب مخالف للسياسة بسبب مضمونه، دون أي حيلة. |
| موجّه النظام | System prompt | prompt système | التعليمات المخفية التي يعطيها التطبيق للنموذج قبل بدء المحادثة. |
| التشكيل | Tashkeel | tashkeel (signes voyelles) | علامات الحركات والنطق في العربية (الفتحة والضمة والكسرة والسكون والشدة). طبيعية في القرآن والشعر والكتب المدرسية؛ وتُضاف أحيانًا عشوائيًا لإخفاء كلمة عن المرشّح. |
| التطويل (الكشيدة) | Tatweel | tatweel (kashida) | خط المدّ (ـ) الذي يطيل الحروف العربية لأغراض التنسيق، كما في تجـــاهل. لا ضرر منه في التصميم، ويُستخدم أيضًا لتقطيع الكلمة. |
| العربيزي | Arabizi | arabizi | العربية المكتوبة بحروف لاتينية وأرقام، مثل «7abibi» أو «3arabi»، وهي شائعة في المحادثات في المنطقة. |
| التوحيد (التطبيع) | Normalisation (folding) | normalisation | ردّ النص إلى صيغة واحدة قبل المطابقة: إزالة التشكيل والتطويل، وتوحيد الحروف المتشابهة، وفكّ الترميزات البسيطة. |
| البيانات الشخصية | Personal data | données personnelles | معلومات تحدد هوية شخص: الهوية الإماراتية، رقم جواز السفر، رقم IBAN، رقم الهاتف، اسم مع عنوان. |
| الإخفاء (التقنيع) | Masking | masquage | استبدال البيانات الحساسة برمز مثل [EMIRATES_ID_1] حتى لا يرى النموذج القيمة أبدًا؛ ويمكن لأنظمة المؤسسة استعادتها. |
| مصنِّف | Classifier | classifieur | نموذج يصنّف النص في فئات ويعيد درجات، دون أن يولّد أي نص. |
| درجة | Score | score | رقم، يكون عادة من 0 إلى 1، يبيّن احتمال انتماء الرسالة إلى فئة ما، مثل «هجوم». |
| العتبة | Threshold | seuil | الدرجة التي يُتخذ عندها إجراء. تُختار على مجموعة تحقق منفصلة، قبل الاختبار. |
| حجب خاطئ | False block | faux blocage | رسالة سليمة أوقفها حاجز الحماية خطأً، وتُسمى أيضًا إيجابية كاذبة. حجب خاطئ أقل يعني مستخدمين أكثر رضا. |
| هجوم فائت | Missed attack | attaque manquée | هجوم سمح به حاجز الحماية، ويُسمى أيضًا سلبية كاذبة. |
| نطاق الثقة | Confidence range | intervalle de confiance | المدى الذي يُرجَّح أن يقع فيه المعدّل المقيس، بحسب عدد الرسائل المختبرة. الاختبار الصغير يعطي مدى واسعًا. |
| مجموعة اختبار عامة | Public test set | jeu de test public | مجموعة منشورة من الرسائل ذات الأجوبة المعروفة، تُستخدم لمقارنة حواجز الحماية بطريقة يستطيع أي أحد إعادتها. |
| مجموعة محجوزة للاختبار | Held-out set | jeu de test réservé | رسائل اختبار تُحفظ جانبًا ولا تُستخدم أبدًا في التدريب أو الضبط، حتى تعكس النتائج رسائل لم يرها النموذج. |
| الفريق الأحمر | Red team | red team (équipe rouge) | أشخاص أو أدوات تهاجم النظام عمدًا وبإذن، لتجد نقاط ضعفه قبل غيرها. |
| هجوم متعدد الأدوار | Multi-turn attack | attaque en plusieurs tours | هجوم موزّع على عدة رسائل، كل منها بريئة وحدها، يتصاعد أو يُعاد تجميعه لاحقًا. |
| وضع المراقبة فقط | Watch-only mode | mode observation | وضع تجريبي يسجّل فيه حاجز الحماية ما كان سيفعله دون أن يحجب شيئًا، لضبط السياسات على الحركة الحقيقية. |
| السياسة | Policy | politique | قواعد تطبيق واحد: أي الفحوص مفعّلة، وأي إجراء (السماح، الإخفاء، التنبيه، طلب إعادة الصياغة، الحجب) يُطبَّق على ماذا. |
| السياسة كشيفرة | Policy as code | politique en tant que code | حفظ السياسات كملفات بإصدارات، فيُراجَع كل تغيير ويُختبر قبل النشر ويمكن التراجع عنه. |
| سجل التدقيق | Audit log | journal d’audit | سجل لكل قرار وكل تغيير: ما الذي حدث، وتحت أي إصدار من السياسة، ومن غيّر ماذا ولماذا. |
| وكيل ذكاء اصطناعي | Agent | agent | نظام ذكاء اصطناعي يتخذ إجراءات نيابة عن أحد، مثل استدعاء الأدوات أو تصفح الويب أو إرسال الرسائل. |
ثلاثة فروق جديرة بالتذكر
- حقن الأوامر يستولي على التطبيق؛ وكسر القيود يُسقط سلوك السلامة في النموذج؛ والمحتوى الضار طلب صريح مخالف للسياسة.
- الحجب الخاطئ يكلّفك ثقة المستخدم؛ والهجوم الفائت يكلّفك الأمان. وحاجز الحماية الجيد يُقاس على الاثنين.
- طيّ النص (إزالة التشكيل والتطويل) للتعرف على الكلمات، لا للحكم على الناس: فالعربية المشكولة عربية طبيعية.
أهم النقاط
- حقن الأوامر وكسر القيود والمحتوى الضار ثلاث مشكلات مختلفة بفحوص مختلفة.
- التشكيل والتطويل والعربيزي طرق طبيعية لكتابة العربية، وعلى حاجز الحماية أن يقرأها لا أن يخشاها.
- الحجب الخاطئ والهجوم الفائت هما الخطآن اللذان يُقاس عليهما كل حاجز حماية.
- تُحدَّد العتبة قبل الاختبار، ويأتي كل معدّل مع نطاق ثقته.
اختبر نفسك
1. ما العربيزي؟
- نوع من الهجمات
- العربية المكتوبة بحروف لاتينية وأرقام — صحيح.
- خط عربي
- مجموعة اختبار
مثل «3arabi» لكلمة عربي: كتابة شائعة وطبيعية يجب أن يفهمها حاجز الحماية.
2. ما الحجب الخاطئ؟
- هجوم ينفذ
- رسالة سليمة أُوقفت خطأً — صحيح.
- عنوان IP محجوب
- جواب بطيء
ويُسمى أيضًا إيجابية كاذبة؛ وهو جانب الكلفة في حاجز الحماية.
3. ماذا يفعل وضع المراقبة فقط؟
- يحجب كل شيء
- يسجّل ما كان حاجز الحماية سيفعله دون أن يحجب — صحيح.
- يطفئ حاجز الحماية ويحذف السجلات
- يعرض إعلانات
يتيح للفريق ضبط السياسات على الحركة الحقيقية قبل تطبيقها.
المصادر
- Arabic diacritics (tashkeel) (Wikipedia)
- Kashida (tatweel) (Wikipedia)
- Arabic chat alphabet (Arabizi) (Wikipedia)
- OWASP GenAI Security Project, LLM01:2025 Prompt Injection
- NIST AI 100-2 E2025, Adversarial Machine Learning: A Taxonomy and Terminology of Attacks and Mitigations
- Red team (Wikipedia)
طبّق ذلك على جهاز Mac الخاص بك
جرّب كل الميزات مجانًا لمدة 17 يومًا، دون بطاقة.