رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

محتوى جنسي وعنيف وإنتاج أسلحة محرمة دولياً

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة
TT

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

تقول شركة ناشئة في مجال الذكاء الاصطناعي إن اختباراتها وجدت أن برامج الذكاء الاصطناعي التوليدية الشهيرة أنتجت محتوىً عنيفاً أو جنسياً، وإنها أيضاً سمحت بأتمتة الهجمات الإلكترونية.

محتوى جنسي وأسلحة كيميائية

وقالت شركة «هايز لابز (Haize Labs)» إنها عثرت على الآلاف من نقاط الضعف في برامج الذكاء الاصطناعي التوليدية الشهيرة، وأصدرت قائمة باكتشافاتها.

بعد اختبار برامج الذكاء الاصطناعي التوليدية الشائعة؛ بما فيها برنامج إنشاء الفيديو «Pika»، وبرنامج «ChatGPT» الذي يركز على النصوص، ومولد الصور «Dall-E»، ونظام الذكاء الاصطناعي الذي يولد رموز الكومبيوتر، اكتشفت «هايز لابز» أن كثيراً من الأدوات المعروفة تنتج محتوىً عنيفاً أو جنسياً، كما أنها وجهت مستخدميها إلى معلومات حول إنتاج أسلحة كيميائية وبيولوجية، وسمحت بأتمتة الهجمات السيبرانية.

و«هايز لابز» شركة ناشئة صغيرة عمرها 5 أشهر فقط أسسها ليونارد تانغ وستيف لي وريتشارد ليو، وهم 3 من الخريجين الجدد الذين التقوا جميعاً في الكلية. ونشروا بشكل جماعي 15 ورقة بحثية حول التعلم الآلي خلال وجودهم في الكلية.

ووصف تانغ تقرير «هايز» بأنه «اختبار إجهاد مستقل من طرف ثالث»، وقال إن هدف شركته هو المساعدة في استئصال مشكلات الذكاء الاصطناعي ونقاط الضعف على نطاق واسع.

معايير السلامة للذكاء الاصطناعي

وفي إشارة إلى إحدى كبريات شركات تصنيف السندات على سبيل المقارنة، قال تانغ إن «هايز» تأمل في أن تصبح «وكالة موديز للذكاء الاصطناعي» التي تحدد تصنيفات السلامة العامة للنماذج الشعبية.

تعدّ سلامة الذكاء الاصطناعي مصدر قلق مزداد؛ حيث تدمج مزيد من الشركات الذكاء الاصطناعي التوليدي في عروضها وتستخدم نماذج لغوية كبيرة في المنتجات الاستهلاكية.

أجوبة «خرافية»

وفي الشهر الماضي، واجهت «غوغل» انتقادات حادة بعد أن اقترحت أداتها التجريبية «AI Overviews»، التي تهدف إلى الإجابة عن أسئلة المستخدمين، أنشطة خطرة مثل تناول صخرة صغيرة واحدة يومياً أو إضافة الغراء إلى البيتزا.

وفي شهر فبراير (شباط) الماضي، تعرضت «شركة طيران كندا» لانتقادات شديدة عندما وعد برنامج الدردشة الآلي الخاص بها؛ المزود بتقنية الذكاء الاصطناعي، بخصم وهمي لأحد المسافرين. وقد دعا مراقبو الصناعة إلى إيجاد طرق أفضل لتقييم مخاطر أدوات الذكاء الاصطناعي.

«مع انتشار أنظمة الذكاء الاصطناعي على نطاق واسع، فسنحتاج إلى مجموعة أكبر من المؤسسات لاختبار قدراتها ومدى إساءة الاستخدام المحتملة أو مشكلات السلامة»؛ وفق ما نشر جاك كلارك، المؤسس المشارك لـ«شركة أبحاث الذكاء الاصطناعي والسلامة (أنثروبيك Anthropic)»، مؤخراً على موقع «إكسX».

برامج توليدية غير آمنة

وقال تانغ: «ما تعلمناه هو أنه على الرغم من كل جهود السلامة التي بذلتها هذه الشركات الكبرى والمختبرات الصناعية، فإنه لا يزال من السهل للغاية إقناع هذه النماذج بفعل أشياء ليس من المفترض أن تفعلها... إنها ليست آمنة».

ويعمل اختبار «هايز» على ممارسة محاكاة الإجراءات العدائية لتحديد نقاط الضعف في نظام الذكاء الاصطناعي. وقال غراهام نيوبيج، الأستاذ المشارك في علوم الكومبيوتر بـ«جامعة كارنيغي ميلون»، إن صناعة الذكاء الاصطناعي تحتاج إلى كيان مستقل للسلامة. وأضاف: «أدوات السلامة الخاصة بالذكاء الاصطناعي التابعة لجهات خارجية مسألة مهمة... إنها يجب أن تكون عادلة ومحايدة على حد سواء. كما يمكن أن تتمتع أداة الأمان التابعة لجهة خارجية بأداء أعلى فيما يتعلق بالتدقيق؛ لأنها أُنشئت بواسطة مؤسسة مختصة في ذلك، على عكس بناء كل شركة أدواتها المختصة».

استئصال الثغرات

وقالت «هايز» إنها أبلغت صانعي أدوات الذكاء الاصطناعي التي اختُبرت بشكل استباقي بنقاط الضعف، ودخلت الشركة الناشئة في شراكة مع «أنثروبيك» لاختبار الإجهاد لمنتج خوارزمي لم يُطرح بعد. وقال تانغ إن استئصال نقاط الضعف في منصات الذكاء الاصطناعي من خلال الأنظمة الآلية أمر بالغ الأهمية؛ «لأن اكتشاف المشكلات يدوياً يستغرق وقتاً طويلاً ويعرض أولئك الذين يعملون في الإشراف على المحتوى لمحتوى عنيف ومزعج».

بعض المحتوى الذي اكتُشف عبر مراجعة «هايز» أدوات الذكاء الاصطناعي التوليدية الشائعة يتضمن صوراً ونصوصاً مروعة ورسومية. وقال تانغ: «كان هناك كثير من الحديث حول مشكلات السلامة التي تسيطر على العالم من خلال الذكاء الاصطناعي... أعتقد أنها مهمة، لكن المشكلة الكبرى هي إساءة استخدام الذكاء الاصطناعي على المدى القصير».

* مجلة «فاست كومباني» - خدمات «تريبيون ميديا»


مقالات ذات صلة

علوم اضطراب مفصل الفك: الأعراض والعلاج ودور الذكاء الاصطناعي

اضطراب مفصل الفك: الأعراض والعلاج ودور الذكاء الاصطناعي

من المهم تشخيصه بشكل صحيح.

د. عميد خالد عبد الحميد (الرياض)
علوم أطلس الذكاء الاصطناعي لمرض السكري

أطلس الذكاء الاصطناعي لمرض السكري

عبر توظيف أجهزة الاستشعار البيئية ومسح العين ومقاييس الاكتئاب والعلامات البيولوجية.

د. وفا جاسم الرجب
علوم «جي بي تي» يصمم مواقع ويب جذابة... وخادعة

«جي بي تي» يصمم مواقع ويب جذابة... وخادعة

تحذيرات أكاديمية من وضع تصميمات دون التفكير في العواقب المحتملة.

كريس ستوكل - والكر (واشنطن)
الاقتصاد المدير التنفيذي لشركة «سيسكو السعودية» سلمان فقيه (تصوير: تركي العقيلي) play-circle 01:37

المدير التنفيذي لـ«سيسكو» السعودية: استثماراتنا بالمملكة مستمرة لدعم جهودها في التحول الرقمي

في ظل ما يشهده قطاع التقنية السعودي من تطور، حقَّقت «سيسكو» أداءً قوياً ومتسقاً مع الفرص المتاحة وقرَّرت مواصلة استثماراتها لدعم جهود السعودية في التحول الرقمي.

زينب علي (الرياض)

ما سبب زيادة ارتفاع جبل إيفرست سنوياً؟

ارتفاع جبل إيفرست يزداد سنوياً بنحو 2 مم (أ.ف.ب)
ارتفاع جبل إيفرست يزداد سنوياً بنحو 2 مم (أ.ف.ب)
TT

ما سبب زيادة ارتفاع جبل إيفرست سنوياً؟

ارتفاع جبل إيفرست يزداد سنوياً بنحو 2 مم (أ.ف.ب)
ارتفاع جبل إيفرست يزداد سنوياً بنحو 2 مم (أ.ف.ب)

من المعروف أن جبل إيفرست، وهو أعلى جبل على وجه الأرض، يزداد ارتفاعاً بنحو 2 مم سنوياً. إلا أن السبب وراء هذا الارتفاع المستمر حيّر العلماء لفترة طويلة.

وبحسب صحيفة «الإندبندنت» البريطانية، فقد اعتقد الكثير من العلماء في السابق أن نمو الجبل يرجع إلى تحرك الصفائح التكتونية، على الرغم من أن هذه النظرية لم تفسر سبب ارتفاع قمة إيفرست بشكل غير طبيعي مقارنة بغيرها في النطاق، حيث يبلغ ارتفاعها نحو 250 متراً فوق أعلى قمة تالية في جبال الهيمالايا.

وتختلف القمم الثلاث التالية في الهيمالايا عن بعضها في الارتفاع بنحو 120 متراً فقط.

والآن وجد باحثون من جامعة لندن أن التأكّل في التربة الناجم عن شبكة نهر تبعد نحو 75 كيلومتراً عن إيفرست هو السبب في ارتفاعه السنوي.

وأوضح الباحثون في الدراسة التي نُشرت (الاثنين) في مجلة «نيتشر» أن هذا التأكّل حدث منذ اندماج نهر أرون القريب مع نهر كوسي المجاور من آلاف السنين. وقد خلق ذلك ظاهرة تسمى «الرفع»، والتي تحدث عندما يفقد جزء من قشرة الأرض كتلته، ثم «يطفو» إلى الأعلى بسبب الضغط الشديد أدناه.

وهذه العملية ليست سريعة؛ إذ يقدر العلماء أن جبل إيفرست نما بمقدار يتراوح بين 15 و50 متراً في الـ89 ألف عام الماضية.

وقال ماثيو فوكس، أحد المشاركين في الدراسة من جامعة لندن: «لطالما لاح للعلماء أن الجبل ينمو بنحو 2 مم سنوياً، والآن لدينا فهم أفضل لما يدفعه إلى ذلك».

ويجري نهر أرون حالياً إلى الشرق من جبل إيفرست، ويندمج في اتجاه مجرى النهر مع نهر كوسي. وعلى مدى آلاف السنين، نحت هذا الاندماج مضيقاً جرف مليارات الأطنان من التربة والرواسب وتسبب في تأكّلها.