الذكاء الاصطناعي

Agent IA ينجم يتصرّف، أما بصلاحيات شنوة

كي الـ IA ما عادش تجاوب برك وتولي تستعمل tools، السؤال الرئيسي يولي شنوة الأفعال المسموحة وكيفاش تنجم توقفها.

المصادر تشافت نهار 2026-09-15

ابدأ القراءةشوف المصادر
Robot يضبط permissions لقاعدة بيانات، email، ملفات وإنترنت
رسم توضيحي تركيبي موش صورة وثائقية

الإطار

من جواب لفعل يبدّل مستوى الخطر

Chatbot ترجع نص وagent تنجم تبعث email، تبدّل fichier ولا تنادي API موش نفس التأثير. كي model تاخو صلاحية تعمل actions، permissions، identité والحدود يدخلوا في security model.

مصادرOWASP

شنوة نعرفو

صلاحيات زايدة تكبّر غلطة وحدة

OWASP يحكي على excessive agency كي model عندها functions، permissions ولا autonomie أكثر من اللازم. الغلطة وقتها ما تبقاش نص؛ تنجم تولّي modification، envoi ولا suppression. Least privilege ينقص حجم الضرر.

مصادرOWASP

وين الخلاف

المحتوى المقروء ينجم يكون فيه تعليمات خايبة

Prompt injection تنجم تدخل من document، page web ولا message يقراه agent. كان عندها tools، محتوى موش موثوق ينجم يحاول يوجّه تصرفها. Filters وحدهم ما يحلوش المشكلة كاملة.

مصادرOWASP

شنوة يتبدّل

التأثير مربوط بالconnecteurs الحقيقيين

Demo agent من غير write access موش كيف agent عندها production، CRM، paiements ولا cloud admin. نفس model تنجم يكون عندها risk مختلف تماما حسب credentials، réseau والtools.

مصادرOWASPCNIL

كيفاش نتصرفو

ابدأ بأقل سلطة وخلي confirmation واضحة

استعمل service accounts منفصلين، scopes صغار، confirmation صريحة للأفعال الحساسة وlogs تنجم تراجعهم. زيد budgets، rate limits وkill switch وين تنجم. وجرّب agent قدام محتوى hostile ولا ambigu.

مصادرOWASPOWASP

LES5C / 05

الخلاصة، من غير ما نسكرو الموضوع

Agent يلزمها كان الصلاحيات اللي تحتاجهم للخدمة. فرّق بين read وwrite، اطلب confirmation قبل العمليات اللي ما ترجعش، حد من access الخارجي وخلي logs ووسيلة stop حقيقية.

الخلاصة هاذي موش كاملة وموش نصيحة شخصية. الحدود والمصادر جزء من الموضوع.

كمّل القراءة