رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

محتوى جنسي وعنيف وإنتاج أسلحة محرمة دولياً

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة
TT

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

تقول شركة ناشئة في مجال الذكاء الاصطناعي إن اختباراتها وجدت أن برامج الذكاء الاصطناعي التوليدية الشهيرة أنتجت محتوىً عنيفاً أو جنسياً، وإنها أيضاً سمحت بأتمتة الهجمات الإلكترونية.

محتوى جنسي وأسلحة كيميائية

وقالت شركة «هايز لابز (Haize Labs)» إنها عثرت على الآلاف من نقاط الضعف في برامج الذكاء الاصطناعي التوليدية الشهيرة، وأصدرت قائمة باكتشافاتها.

بعد اختبار برامج الذكاء الاصطناعي التوليدية الشائعة؛ بما فيها برنامج إنشاء الفيديو «Pika»، وبرنامج «ChatGPT» الذي يركز على النصوص، ومولد الصور «Dall-E»، ونظام الذكاء الاصطناعي الذي يولد رموز الكومبيوتر، اكتشفت «هايز لابز» أن كثيراً من الأدوات المعروفة تنتج محتوىً عنيفاً أو جنسياً، كما أنها وجهت مستخدميها إلى معلومات حول إنتاج أسلحة كيميائية وبيولوجية، وسمحت بأتمتة الهجمات السيبرانية.

و«هايز لابز» شركة ناشئة صغيرة عمرها 5 أشهر فقط أسسها ليونارد تانغ وستيف لي وريتشارد ليو، وهم 3 من الخريجين الجدد الذين التقوا جميعاً في الكلية. ونشروا بشكل جماعي 15 ورقة بحثية حول التعلم الآلي خلال وجودهم في الكلية.

ووصف تانغ تقرير «هايز» بأنه «اختبار إجهاد مستقل من طرف ثالث»، وقال إن هدف شركته هو المساعدة في استئصال مشكلات الذكاء الاصطناعي ونقاط الضعف على نطاق واسع.

معايير السلامة للذكاء الاصطناعي

وفي إشارة إلى إحدى كبريات شركات تصنيف السندات على سبيل المقارنة، قال تانغ إن «هايز» تأمل في أن تصبح «وكالة موديز للذكاء الاصطناعي» التي تحدد تصنيفات السلامة العامة للنماذج الشعبية.

تعدّ سلامة الذكاء الاصطناعي مصدر قلق مزداد؛ حيث تدمج مزيد من الشركات الذكاء الاصطناعي التوليدي في عروضها وتستخدم نماذج لغوية كبيرة في المنتجات الاستهلاكية.

أجوبة «خرافية»

وفي الشهر الماضي، واجهت «غوغل» انتقادات حادة بعد أن اقترحت أداتها التجريبية «AI Overviews»، التي تهدف إلى الإجابة عن أسئلة المستخدمين، أنشطة خطرة مثل تناول صخرة صغيرة واحدة يومياً أو إضافة الغراء إلى البيتزا.

وفي شهر فبراير (شباط) الماضي، تعرضت «شركة طيران كندا» لانتقادات شديدة عندما وعد برنامج الدردشة الآلي الخاص بها؛ المزود بتقنية الذكاء الاصطناعي، بخصم وهمي لأحد المسافرين. وقد دعا مراقبو الصناعة إلى إيجاد طرق أفضل لتقييم مخاطر أدوات الذكاء الاصطناعي.

«مع انتشار أنظمة الذكاء الاصطناعي على نطاق واسع، فسنحتاج إلى مجموعة أكبر من المؤسسات لاختبار قدراتها ومدى إساءة الاستخدام المحتملة أو مشكلات السلامة»؛ وفق ما نشر جاك كلارك، المؤسس المشارك لـ«شركة أبحاث الذكاء الاصطناعي والسلامة (أنثروبيك Anthropic)»، مؤخراً على موقع «إكسX».

برامج توليدية غير آمنة

وقال تانغ: «ما تعلمناه هو أنه على الرغم من كل جهود السلامة التي بذلتها هذه الشركات الكبرى والمختبرات الصناعية، فإنه لا يزال من السهل للغاية إقناع هذه النماذج بفعل أشياء ليس من المفترض أن تفعلها... إنها ليست آمنة».

ويعمل اختبار «هايز» على ممارسة محاكاة الإجراءات العدائية لتحديد نقاط الضعف في نظام الذكاء الاصطناعي. وقال غراهام نيوبيج، الأستاذ المشارك في علوم الكومبيوتر بـ«جامعة كارنيغي ميلون»، إن صناعة الذكاء الاصطناعي تحتاج إلى كيان مستقل للسلامة. وأضاف: «أدوات السلامة الخاصة بالذكاء الاصطناعي التابعة لجهات خارجية مسألة مهمة... إنها يجب أن تكون عادلة ومحايدة على حد سواء. كما يمكن أن تتمتع أداة الأمان التابعة لجهة خارجية بأداء أعلى فيما يتعلق بالتدقيق؛ لأنها أُنشئت بواسطة مؤسسة مختصة في ذلك، على عكس بناء كل شركة أدواتها المختصة».

استئصال الثغرات

وقالت «هايز» إنها أبلغت صانعي أدوات الذكاء الاصطناعي التي اختُبرت بشكل استباقي بنقاط الضعف، ودخلت الشركة الناشئة في شراكة مع «أنثروبيك» لاختبار الإجهاد لمنتج خوارزمي لم يُطرح بعد. وقال تانغ إن استئصال نقاط الضعف في منصات الذكاء الاصطناعي من خلال الأنظمة الآلية أمر بالغ الأهمية؛ «لأن اكتشاف المشكلات يدوياً يستغرق وقتاً طويلاً ويعرض أولئك الذين يعملون في الإشراف على المحتوى لمحتوى عنيف ومزعج».

بعض المحتوى الذي اكتُشف عبر مراجعة «هايز» أدوات الذكاء الاصطناعي التوليدية الشائعة يتضمن صوراً ونصوصاً مروعة ورسومية. وقال تانغ: «كان هناك كثير من الحديث حول مشكلات السلامة التي تسيطر على العالم من خلال الذكاء الاصطناعي... أعتقد أنها مهمة، لكن المشكلة الكبرى هي إساءة استخدام الذكاء الاصطناعي على المدى القصير».

* مجلة «فاست كومباني» - خدمات «تريبيون ميديا»


مقالات ذات صلة

علوم اضطراب مفصل الفك: الأعراض والعلاج ودور الذكاء الاصطناعي

اضطراب مفصل الفك: الأعراض والعلاج ودور الذكاء الاصطناعي

من المهم تشخيصه بشكل صحيح.

د. عميد خالد عبد الحميد (الرياض)
علوم أطلس الذكاء الاصطناعي لمرض السكري

أطلس الذكاء الاصطناعي لمرض السكري

عبر توظيف أجهزة الاستشعار البيئية ومسح العين ومقاييس الاكتئاب والعلامات البيولوجية.

د. وفا جاسم الرجب
علوم «جي بي تي» يصمم مواقع ويب جذابة... وخادعة

«جي بي تي» يصمم مواقع ويب جذابة... وخادعة

تحذيرات أكاديمية من وضع تصميمات دون التفكير في العواقب المحتملة.

كريس ستوكل - والكر (واشنطن)
الاقتصاد المدير التنفيذي لشركة «سيسكو السعودية» سلمان فقيه (تصوير: تركي العقيلي) play-circle 01:37

المدير التنفيذي لـ«سيسكو» السعودية: استثماراتنا بالمملكة مستمرة لدعم جهودها في التحول الرقمي

في ظل ما يشهده قطاع التقنية السعودي من تطور، حقَّقت «سيسكو» أداءً قوياً ومتسقاً مع الفرص المتاحة وقرَّرت مواصلة استثماراتها لدعم جهود السعودية في التحول الرقمي.

زينب علي (الرياض)

الذكاء الاصطناعي في التعليم والصحة

نظم الذكاء الاصطناعي في الطب الشخصي المخصّص
نظم الذكاء الاصطناعي في الطب الشخصي المخصّص
TT

الذكاء الاصطناعي في التعليم والصحة

نظم الذكاء الاصطناعي في الطب الشخصي المخصّص
نظم الذكاء الاصطناعي في الطب الشخصي المخصّص

لندن: «الشرق الأوسط»

يمكن استغلال الذكاء الاصطناعي التوليدي في مجال التعليم، في تطوير خطط تعليمية مخصصة للطلاب، بحسب درجاتهم وفهمهم العام لمختلف المواد.

معاونة الطلاب والمدرسين

يمكن لأدوات الذكاء الاصطناعي التوليدي مثل «تشات جي بي تي» ChatGPT، معاونة الطلاب على أداء المهام المعقدة، مثل التعمق في دراسة المناهج المطلوبة وذلك كمنطلق لجلسات الشحذ الذهني لمجموعات الطلاب. وإن كان هذا لا يمنع الاعتراف بأن «تشات جي بي تي» يساء استخدامه من جانب بعض الطلاب. وفيما يخص المعلمين المشغولين، يحمل الذكاء الاصطناعي التوليدي، وعوداً بتبسيط المهام اليومية الرتيبة، مثل صياغة خطط الدروس، وتحديد الخطوط العريضة للمهام، وإنشاء معايير التقييم، وبناء الاختبارات، وتوفير وسائل تعليمية مبتكرة، وغير ذلك.

تطبيقات للطلاب والمدرسين

> تجارب تعلُّم المفردات الشخصية يتوافق مع مستويات الطلاب

يعتمد نظام «نوجي» Knowji على الذكاء الاصطناعي التوليدي في بناء دروس لمفردات شخصية، تتوافق مع مستوى كفاءة المتعلم ووتيرة التعلم، وعبر إنشاء اختبارات مخصصة واستخدام خوارزميات التكرار المتباعد، ويضمن النظام الاحتفاظ الفاعل وإتقان الكلمات الجديدة، ما يجعل عملية تعلم اللغة أكثر كفاءة، مع تصميم يتماشى مع الاحتياجات الفردية.

ويتميز التطبيق بالجاذبية وطابع تفاعلي. ويساعد هذا المستخدمين على بناء اتصال أعمق باللغة، على نحو يساعدهم في جعل بناء المفردات متعة، وليس مهمة شاقة.

إنشاء محتوى آلي للمدرسين

بفضل الذكاء الاصطناعي التوليدي، يساعد نظام «جاسبر» Jasper، المدرسين في إنشاء مواد لدورة تعليمية شاملة ومخصصة.

وعبر إدخال موضوع، يمكن للتطبيق إنشاء خطط درس مفصلة وملاحظات محاضرات ومحتوى تعليمي، ما يوفر للمعلمين الكثير من الوقت والجهد. وعلاوة على ذلك، يعمل النظام بمثابة أداة تعاونية تتيح للمعلمين تحسين المحتوى الذي جرى إنشاؤه بواسطة الذكاء الاصطناعي، والتأكد من أنه يتوافق مع المعايير والأهداف التعليمية.

نظام الذكاء الاصطناعي التعليمي "نوجي"

تعلم اللغات وممارستها

يستخدم نظام «دوالنغو» Duolingo الذكاء الاصطناعي التوليدي لتخصيص تجارب تعلم اللغة لمستخدميه. وتتكيف المنصة مع وتيرة تقدم كل متعلم، وتولد تمارين ومحادثات تستهدف مجالات معينة من التحسين، ما يجعل عملية تعلم اللغة أكثر تفاعلية وتكيفاً. وتجعل اللعبة من مسألة تعلم لغة جديدة تجربة ممتعة، وتشجع على الممارسة اليومية المتسقة.

طب شخصي مخصص

تخضع صناعة الرعاية الصحية لتغييرات كبرى بفضل الذكاء الاصطناعي التوليدي، مع شروع الكثير من منظمات الرعاية الصحية حالياً في الاستفادة من الذكاء الاصطناعي التوليدي بطرق مختلفة. على سبيل المثال، يمكن للأطباء استخدام الذكاء الاصطناعي التوليدي لتطوير خطط رعاية خاصة تتوافق مع احتياجات المرضى. كما يوفر الذكاء الاصطناعي التوليدي حلولاً رائدة على صعيدي التشخيص، وتخطيط العلاج واكتشاف الأدوية، من بين استخدامات أخرى، الأمر الذي يمكّن مقدمي الرعاية الصحية من توفير خدمات رعاية صحية أكثر كفاءة، مع تخصيص رعاية المرضى على نحو غير مسبوق.

الطب الشخصي

يعتمد «إنسليكو ميديسن» Insilico Medicine على الذكاء الاصطناعي التوليدي لإحداث ثورة في اكتشاف الأدوية وخطط العلاج الشخصية.

ومن خلال التنبؤ بتأثيرات الأدوية على الملفات الجينية الفردية المحددة، تمكّن هذه الأداة من تطوير علاجات مخصصة، الأمر الذي يقلل من معدلات التجربة والخطأ في اختيار العلاج، ويعزز فاعلية التدخلات الطبية. وبفضل قدرتها على فحص ملايين الجزيئات بسرعة، بحثاً عن تأثيرات علاجية محتملة، تساهم في تسريع وتيرة الانتقال من مرحلة البحث إلى مرحلة التجارب السريرية بشكل كبير، وتعزز الأمل في تحقيق اختراقات أسرع في الطب.

منصات تفاعلية

منصات تفاعل المرضى المدعومة بالذكاء الاصطناعي

يستخدم نظام «هيرو» Hyro تقنية الذكاء الاصطناعي التوليدي لتشغيل منصة المحادثة المتوافقة مع قانون نقل للتأمين الصحي ومسائل الرعاية الصحية. وتعمل على أتمتة تفاعلات المرضى، وتوفر المعلومات والدعم في الوقت المناسب، بهدف تحسين تجربة رعاية المرضى لمستخدميها، مع المساعدة في الوقت ذاته في تخفيف مشكلات التوظيف داخل المؤسسات الطبية. وبجانب التفاعل مع المرضى، يتكامل الذكاء الاصطناعي من «هيرو» مع أنظمة الرعاية الصحية لتوفير تحليلات البيانات في الوقت الفعلي، التي تعزز الكفاءة التشغيلية وجهود التنسيق لرعاية المرضى.

كشف السرطان مبكراً

يمثل نظام «سكن فيجن» SkinVision خدمة طبية منظمة، قائمة على الذكاء الاصطناعي التوليدي لتحليل صور الجلد، بحثاً عن العلامات المبكرة لسرطان الجلد. ويتولى التطبيق إنشاء تقييمات بناءً على الأنماط المرئية، ما يساهم في الكشف المبكر عن الحالات الصحية المرتبطة بالجلد وعلاجها. ويعتمد الذكاء الاصطناعي التوليدي على خبرة أطباء الجلد وغيرهم من المتخصصين في صحة الجلد. وعبر تشجيع الفحوصات الجلدية المنتظمة، يزيد التطبيق بشكل كبير من فرص نجاح العلاج لمرضى سرطان الجلد.