وورلد برس عربي logo

العلامات المائية وتأثيرها الخفي على أمان نماذج الذكاء

تقنية العلامات المائية SynthID-Text تسعى لتمييز نصوص الذكاء الاصطناعي لكنها قد تغير سلوك النماذج وتزيد استجابتها لطلبات ضارة. اكتشف كيف تؤثر هذه التقنية على أمان الذكاء الاصطناعي في وورلد برس عربي.

شعار مكتوب عليه "AI-GENERATED" باللون الأحمر يدل على نص مولّد بواسطة الذكاء الاصطناعي، مرتبط بتقنية العلامات المائية في نماذج الذكاء الاصطناعي.
علامة تحذير لمحتوى مولد بالذكاء الاصطناعي معزولة على خلفية بيضاء حقوق الصورة: Getty Images
التصنيف:تكنولوجيا
شارك الخبر:
FacebookTwitterLinkedInEmail

حين تُعلن شركة Anthropic أنّها ستُضمّن نماذج Claude المستقبلية تقنيةَ العلامات المائية SynthID-Text، يبدو الأمر للوهلة الأولى خطوةً إيجابية نحو الشفافية وسيلةً لتمييز ما تولّده الآلة عمّا يكتبه الإنسان. لكنّ بحثاً أمنياً جديداً يطرح سؤالاً مزعجاً: هل يمكن لهذه العلامة المائية نفسها أن تجعل النموذج أكثر استعداداً للاستجابة لطلبات ضارة كان سيرفضها في الأصل؟

ما الذي تفعله العلامة المائية فعلاً؟

SynthID-Text تقنيةٌ طوّرتها Google وأصدرتها بوصفها برمجيةً مفتوحة المصدر. آليتها ليست بسيطة: بدلاً من إضافة نصٍّ خفيٍّ في نهاية المقطع أو تغيير التنسيق، تتدخّل في صميم عملية توليد النص ذاتها. تحديداً، تستخدم ما يُعرف بـأسلوب الاختيار التنافسي (tournament sampling)، حيث تتنافس الكلمات المرشّحة التالية بناءً على درجاتٍ تحسبها مفتاحٌ سري، فتُرجَّح بعض الكلمات على حساب أخرى بطريقةٍ لا يلاحظها القارئ البشري، لكنّها تترك بصمةً يمكن الكشف عنها لاحقاً.

المشكلة أنّ هذا التعديل الدقيق لا يقف عند حدود الأسلوب. فبحسب بحث Lasso Security، فإنّ اختيار رمزٍ (token) مختلف هنا أو هناك قد يُغيّر أيّ أداةٍ يستدعيها النموذج، وما الحجج التي يمرّرها إليها، وفي النهاية ما إذا كان سيرفض طلباً ضاراً أم لا.

مخطط يوضح تأثير تقنية العلامة المائية SynthID-Text على دقة استدعاء الأدوات في ستة نماذج ذكاء اصطناعي مفتوحة المصدر، مع تغيرات في السلوك الأمني.
Loading image...
تغيير العلامة المائية أثر على دقة مكالمات الأدوات الفردية بشكل أكبر أحيانًا مما تشير إليه درجة الدقة الإجمالية. المصدر: Lasso Security

التجربة: ستة نماذج تحت المجهر

أجرت الباحثة الأمنية Andrea Siposova من شركة Lasso Security تجاربَ على 6 نماذج مفتوحة الأوزان عبر تطبيق SynthIDTextWatermarkLogitsProcessor المتاح على منصة Hugging Face. النتائج كانت لافتة: العلامة المائية غيّرت سلوك النماذج بوضوح، سواءٌ في دقة استدعاء الأدوات أو في الامتثال لطلبات ضارة وذلك بحسب المفتاح السري المستخدم.

تقول Siposova: "مقارنةً بالنماذج ذاتها من دون علامة مائية، ستتغيّر سلوكياتها بالتأكيد، لا سيّما حين نضعها في ظروف هجومية، أو حين نجعل هذه النماذج تستدعي أدواتٍ في سياق عمل وكيل ذكاء اصطناعي."

ما يُثير القلق بشكلٍ خاص هو تأثير هجمات حقن التعليمات (prompt injection)، وهي تقنيةٌ هجومية تُدسّ فيها تعليماتٌ خبيثة ضمن المدخلات لإجبار النموذج على تجاوز قواعده. وجدت Siposova أنّ العلامة المائية تُضخّم هذا الخطر: "تُغيّر العلامة المائية سلوك الرفض في الطلبات الضارة المباشرة، لكنّ التأثير يكون أكثر وضوحاً حين تُقرن هذه الطلبات بتقنية حقن التعليمات."

مخطط يوضح كيفية دمج تقنية العلامات المائية SynthID-Text في نماذج توليد النصوص الكبيرة وتأثيرها على اختيار الرموز وتوزيع الاحتمالات داخل النموذج.
Loading image...
توليد النصوص العادي مقابل النصوص ذات العلامة المائية. المصدر: لاسو سيكيوريتي

وتوضّح أكثر: "في عدد من النماذج، تجعل العلامة المائية النموذجَ أكثر استعداداً للإجابة عن طلبات ضارة كان سيرفضها في الأصل."

"انجراف السلوك" المصطلح الذي يجب فهمه

أطلقت Siposova على هذه الظاهرة اسم "الانجراف في أسلوب الاختيار" (sampling drift)، وهو مصطلحٌ يستحق الوقوف عنده. تشرح ذلك في ورقتها البحثية بقولها: "على مستوى النموذج، يمكن أن يُغيّر هذا الأمر سلوك الأمان، بما في ذلك ما إذا كان النموذج يرفض طلباً ضاراً وما إذا كان هذا الرفض يصمد أمام حقن التعليمات. وعلى مستوى الوكيل، يمكن للرموز المُختارة ذاتها أن تُحدّد أيّ أداةٍ تُستدعى وما الحجج التي تُمرَّر إليها. يربط حقن التعليمات هذين السياقَين معاً، لأنّ الرفض المُضعَف يصبح أشدّ خطورةً حين يستطيع النموذج أيضاً التصرّف عبر الأدوات. وبذلك يمكن لهذا الإجراء أن يؤثّر في ما يقوله النموذج وما يفعله الوكيل. نُسمّي هذا التأثير السلوكي انجراف الاختيار."

رسم بياني يوضح تأثير تقنية العلامات المائية SynthID-Text على نجاح هجمات حقن التعليمات في نماذج الذكاء الاصطناعي المفتوحة، مع اختلافات في استجابة النماذج للطلبات الضارة.
Loading image...
تأثير تغيير مفتاح معين على سلوك النموذج. كل نقطة تمثل مفتاحًا واحدًا؛ النقاط الواقعة يمين الصفر تشير إلى زيادة في الامتثال الضار مقارنة بعدم وجود العلامة المائية، بينما النقاط الواقعة يسار الصفر تدل على تقليل الامتثال. النقاط البرتقالية تمثل 10 مفاتيح إضافية، والماس الأسود يرمز إلى المفتاح المستخدم في التجربة الرئيسية (تم اختيار المفاتيح عشوائيًا). المصدر: Lasso Security

الصورة إذن أوضح: العلامة المائية ليست طبقةً مُضافة فوق النموذج، بل تتشابك مع آلية اتّخاذ القرار في كلّ خطوة من خطوات التوليد.

وتُلخّص Siposova الإشكالية الجوهرية بعبارةٍ دقيقة: "العلامة المائية مُصمَّمة لتكون غير محسوسةٍ للقارئ، لكنّنا نعلم أنّ أيّ تغييرٍ في ما يُولّده النموذج سيُحدث مقايضات، وستظهر آثاره في مكانٍ ما."

تحفّظات ضرورية قبل القفز إلى الاستنتاجات

ثمّة سياقٌ مهمّ لا يجب إغفاله. البحث اختبر نماذج مفتوحة الأوزان عبر تطبيق Hugging Face، وليس نماذج Claude تحديداً. Anthropic لم تُطبّق بعد SynthID-Text في منتجاتها هي أعلنت فقط عن خطط مستقبلية لذلك، دون تحديد موعد. كما أنّ تطبيق Hugging Face قد يختلف في تفاصيل تنفيذه عمّا ستعتمده Anthropic.

رسم بياني يوضح تأثير العلامة المائية SynthID-Text على دقة استدعاء الأدوات وسلوك نماذج الذكاء الاصطناعي المفتوحة المصدر في مواجهة طلبات ضارة.
Loading image...
تُظهر هذه الصورة أنواع التغييرات في استدعاء الأدوات التي تسبب بها وضع العلامة المائية. تمثل الخطوط العمودية الدقة بدون وضع العلامة المائية، بينما توضح الأشرطة التغيرات عند تطبيق العلامة المائية. اللون البرتقالي يشير إلى التحولات من صحيحة إلى خاطئة، واللون الأزرق يشير إلى التحولات من خاطئة إلى صحيحة. المصدر: Lasso Security

بيد أنّ هذه التحفّظات لا تُلغي المخاوف، بل تُعيد توجيهها: إذا كانت هذه التأثيرات تظهر في التطبيق المرجعي المفتوح المصدر الذي طوّرته Google وأتاحته Hugging Face، فإنّ أيّ جهةٍ تعتزم نشر نماذج مُعلَّمة بعلامات مائية Anthropic أو سواها مُلزَمةٌ بإجراء اختبارات أمنية صارمة قبل الإطلاق.

وهذا بالضبط ما توصي به Siposova: إجراء اختبارات الفريق الأحمر (red-team testing) للتحقّق من أمان النماذج قبل نشر العلامات المائية في بيئات الإنتاج.

لماذا يهمّ هذا الآن؟

السياق التنظيمي يمنح هذا البحث ثقلاً إضافياً. قانون الذكاء الاصطناعي الأوروبي يُلزم منصّات الذكاء الاصطناعي بتمييز المحتوى المُولَّد آلياً، ما يعني أنّ العلامات المائية ستنتقل من خانة "الاختياري" إلى خانة "الإلزامي" في السنوات القريبة. وكلّما اتّسع نطاق الاعتماد على هذه التقنية، كبُر حجم ما يمكن أن تتأثّر به إذا تبيّن أنّها تُضعف الضمانات الأمنية.

SynthID-Text كتقنيةٍ لها مبرّراتها الواضحة: مكافحة التضليل، وحماية حقوق الملكية الفكرية، وبناء الثقة في المحتوى الرقمي. لكنّ بحث Lasso Security يُذكّرنا بأنّ كلّ تدخّلٍ في آلية التوليد له ثمنٌ ما وأنّ هذا الثمن قد يُدفع من رصيد الأمان. السؤال المطروح الآن أمام Anthropic وغيرها من الشركات التي تدرس تبنّي هذه التقنية: هل أجرتم الاختبارات الكافية لمعرفة أين بالضبط سيظهر هذا الثمن؟

أخبار ذات صلة

Loading...
طائرة هليكوبتر كهربائية صغيرة وطائرة بوينغ تابعة لشركة يونايتد في مطار، تعكس تطور تكنولوجيا الطيران وجهود FAA لتحسين إدارة حركة الجو بالذكاء الاصطناعي.

نظام إدارة المسارات الجوية الجديد: استثمار بـ 875 مليون دولار في الذكاء الاصطناعي

تعاني هيئة الطيران الفيدرالية الأمريكية نقصاً حاداً في مراقبي حركة الجو، وتراهن على برنامج ذكاء اصطناعي متطور لتحديث إدارة الرحلات وضمان السلامة. اكتشف كيف سيغير SMART مستقبل الطيران. اقرأ المزيد الآن!
تكنولوجيا
Loading...
رسم كاريكاتوري يُظهر مبدع المحتوى يستخدم رافعة لرفع صناعة التكنولوجيا، مشيراً إلى أهمية المحتوى في دعم تقنيات الذكاء الاصطناعي.

مسؤول في Microsoft يصف كشط بيانات الذكاء الاصطناعي بـ "أكبر سرقة عمل في التاريخ"

وثائق سرية تكشف أن Microsoft وOpenAI استخدمتا محتوى صحفي دون إذن، مهددة مستقبل الإعلام وحقوق النشر. اكتشف التفاصيل الصادمة وتأثير الذكاء الاصطناعي على الصحافة الآن!
تكنولوجيا
Loading...
ساتيا ناديلا رئيس مايكروسوفت يتحدث أمام شعاري OpenAI ومايكروسوفت في مؤتمر حول الذكاء الاصطناعي وسط جدل حقوق النشر.

مسؤول في Microsoft يصف سرقة بيانات الذكاء الاصطناعي بـ "أكبر سرقة عمل في التاريخ"

وثائق داخلية تكشف اعتراف Microsoft و OpenAI بسرقة محتوى صحفي لتدريب الذكاء الاصطناعي، مما يهدد مستقبل الصحافة الرقمية. اكتشف التفاصيل وتأثيرها على حقوق النشر الآن.
تكنولوجيا
Loading...
غرفة معيشة بسيطة مع أريكة وطاولة صغيرة ونباتات، تظهر واجهة أداة Restyle لتعديل أثاث الغرف بالذكاء الاصطناعي من Pinterest.

Pinterest تطلق ميزة "إعادة التصميم" لتجديد غرفتك بالذكاء الاصطناعي

اكتشف كيف تتيح لك أداة Restyle الجديدة من Pinterest تعديل صور غرفتك باستخدام الذكاء الاصطناعي لتجربة ديكور فريدة قبل الشراء. جرب الآن وغيّر منزلك بأسلوبك الخاص!
تكنولوجيا
الرئيسيةأخبارسياسةأعمالرياضةالعالمعلومصحةتسلية