رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

محتوى جنسي وعنيف وإنتاج أسلحة محرمة دولياً

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة
TT

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

رصد آلاف الثغرات في برامج الذكاء الاصطناعي الشائعة

تقول شركة ناشئة في مجال الذكاء الاصطناعي إن اختباراتها وجدت أن برامج الذكاء الاصطناعي التوليدية الشهيرة أنتجت محتوىً عنيفاً أو جنسياً، وإنها أيضاً سمحت بأتمتة الهجمات الإلكترونية.

محتوى جنسي وأسلحة كيميائية

وقالت شركة «هايز لابز (Haize Labs)» إنها عثرت على الآلاف من نقاط الضعف في برامج الذكاء الاصطناعي التوليدية الشهيرة، وأصدرت قائمة باكتشافاتها.

بعد اختبار برامج الذكاء الاصطناعي التوليدية الشائعة؛ بما فيها برنامج إنشاء الفيديو «Pika»، وبرنامج «ChatGPT» الذي يركز على النصوص، ومولد الصور «Dall-E»، ونظام الذكاء الاصطناعي الذي يولد رموز الكومبيوتر، اكتشفت «هايز لابز» أن كثيراً من الأدوات المعروفة تنتج محتوىً عنيفاً أو جنسياً، كما أنها وجهت مستخدميها إلى معلومات حول إنتاج أسلحة كيميائية وبيولوجية، وسمحت بأتمتة الهجمات السيبرانية.

و«هايز لابز» شركة ناشئة صغيرة عمرها 5 أشهر فقط أسسها ليونارد تانغ وستيف لي وريتشارد ليو، وهم 3 من الخريجين الجدد الذين التقوا جميعاً في الكلية. ونشروا بشكل جماعي 15 ورقة بحثية حول التعلم الآلي خلال وجودهم في الكلية.

ووصف تانغ تقرير «هايز» بأنه «اختبار إجهاد مستقل من طرف ثالث»، وقال إن هدف شركته هو المساعدة في استئصال مشكلات الذكاء الاصطناعي ونقاط الضعف على نطاق واسع.

معايير السلامة للذكاء الاصطناعي

وفي إشارة إلى إحدى كبريات شركات تصنيف السندات على سبيل المقارنة، قال تانغ إن «هايز» تأمل في أن تصبح «وكالة موديز للذكاء الاصطناعي» التي تحدد تصنيفات السلامة العامة للنماذج الشعبية.

تعدّ سلامة الذكاء الاصطناعي مصدر قلق مزداد؛ حيث تدمج مزيد من الشركات الذكاء الاصطناعي التوليدي في عروضها وتستخدم نماذج لغوية كبيرة في المنتجات الاستهلاكية.

أجوبة «خرافية»

وفي الشهر الماضي، واجهت «غوغل» انتقادات حادة بعد أن اقترحت أداتها التجريبية «AI Overviews»، التي تهدف إلى الإجابة عن أسئلة المستخدمين، أنشطة خطرة مثل تناول صخرة صغيرة واحدة يومياً أو إضافة الغراء إلى البيتزا.

وفي شهر فبراير (شباط) الماضي، تعرضت «شركة طيران كندا» لانتقادات شديدة عندما وعد برنامج الدردشة الآلي الخاص بها؛ المزود بتقنية الذكاء الاصطناعي، بخصم وهمي لأحد المسافرين. وقد دعا مراقبو الصناعة إلى إيجاد طرق أفضل لتقييم مخاطر أدوات الذكاء الاصطناعي.

«مع انتشار أنظمة الذكاء الاصطناعي على نطاق واسع، فسنحتاج إلى مجموعة أكبر من المؤسسات لاختبار قدراتها ومدى إساءة الاستخدام المحتملة أو مشكلات السلامة»؛ وفق ما نشر جاك كلارك، المؤسس المشارك لـ«شركة أبحاث الذكاء الاصطناعي والسلامة (أنثروبيك Anthropic)»، مؤخراً على موقع «إكسX».

برامج توليدية غير آمنة

وقال تانغ: «ما تعلمناه هو أنه على الرغم من كل جهود السلامة التي بذلتها هذه الشركات الكبرى والمختبرات الصناعية، فإنه لا يزال من السهل للغاية إقناع هذه النماذج بفعل أشياء ليس من المفترض أن تفعلها... إنها ليست آمنة».

ويعمل اختبار «هايز» على ممارسة محاكاة الإجراءات العدائية لتحديد نقاط الضعف في نظام الذكاء الاصطناعي. وقال غراهام نيوبيج، الأستاذ المشارك في علوم الكومبيوتر بـ«جامعة كارنيغي ميلون»، إن صناعة الذكاء الاصطناعي تحتاج إلى كيان مستقل للسلامة. وأضاف: «أدوات السلامة الخاصة بالذكاء الاصطناعي التابعة لجهات خارجية مسألة مهمة... إنها يجب أن تكون عادلة ومحايدة على حد سواء. كما يمكن أن تتمتع أداة الأمان التابعة لجهة خارجية بأداء أعلى فيما يتعلق بالتدقيق؛ لأنها أُنشئت بواسطة مؤسسة مختصة في ذلك، على عكس بناء كل شركة أدواتها المختصة».

استئصال الثغرات

وقالت «هايز» إنها أبلغت صانعي أدوات الذكاء الاصطناعي التي اختُبرت بشكل استباقي بنقاط الضعف، ودخلت الشركة الناشئة في شراكة مع «أنثروبيك» لاختبار الإجهاد لمنتج خوارزمي لم يُطرح بعد. وقال تانغ إن استئصال نقاط الضعف في منصات الذكاء الاصطناعي من خلال الأنظمة الآلية أمر بالغ الأهمية؛ «لأن اكتشاف المشكلات يدوياً يستغرق وقتاً طويلاً ويعرض أولئك الذين يعملون في الإشراف على المحتوى لمحتوى عنيف ومزعج».

بعض المحتوى الذي اكتُشف عبر مراجعة «هايز» أدوات الذكاء الاصطناعي التوليدية الشائعة يتضمن صوراً ونصوصاً مروعة ورسومية. وقال تانغ: «كان هناك كثير من الحديث حول مشكلات السلامة التي تسيطر على العالم من خلال الذكاء الاصطناعي... أعتقد أنها مهمة، لكن المشكلة الكبرى هي إساءة استخدام الذكاء الاصطناعي على المدى القصير».

* مجلة «فاست كومباني» - خدمات «تريبيون ميديا»


مقالات ذات صلة

شركات الذكاء الاصطناعي التوليدي تلجأ إلى الكتب لتطوّر برامجها

تكنولوجيا شركات الذكاء الاصطناعي تتفق مع دور النشر بما يتيح لهذه الشركات استخدام الأعمال المنشورة لتدريب نماذجها القائمة على الذكاء الاصطناعي التوليدي (رويترز)

شركات الذكاء الاصطناعي التوليدي تلجأ إلى الكتب لتطوّر برامجها

مع ازدياد احتياجات الذكاء الاصطناعي التوليدي، بدأت أوساط قطاع النشر هي الأخرى في التفاوض مع المنصات التي توفر هذه التقنية سعياً إلى حماية حقوق المؤلفين.

«الشرق الأوسط» (باريس)
الاقتصاد بورصة نيويورك للأوراق المالية (وكالة حماية البيئة)

هيمنة الأسهم الأميركية تزداد قوة مع فوز ترمب

تواصل الأسهم الأميركية تعزيز تفوقها على منافسيها العالميين، ويعتقد العديد من المستثمرين أن هذه الهيمنة قد تزداد إذا تمكن دونالد ترمب من تنفيذ برنامجه.

«الشرق الأوسط» (نيويورك)
تكنولوجيا يستعرض مؤتمر «مايكروسوفت إغنايت 2024» أبرز تقنيات الذكاء الاصطناعي المقبلة

مؤتمر «مايكروسوفت إغنايت 2024» يكشف عن أبرز نزعات الذكاء الاصطناعي المقبلة

إطلاق أكبر مشروع للأمن الرقمي بتاريخ البشرية لمواجهة أكثر من 7000 هجمة في الثانية.

خلدون غسان سعيد (جدة)
الاقتصاد علم شركة «إنفيديا» على الحرم الجامعي في سانتا كلارا بكاليفورنيا (إ.ب.أ)

بالأرقام... كيف أصبحت «إنفيديا» الشركة الأكثر قيمة في العالم؟

حققت «إنفيديا» مرة أخرى نتائج ربع سنوية تجاوزت توقعات «وول ستريت».

«الشرق الأوسط» (نيويورك)
الاقتصاد شاشة تسجيل الوصول في مكتب «إنفيديا» في أوستن بتكساس (أ.ف.ب)

«إنفيديا» تتفوق على توقعات الأرباح مع ترقب المستثمرين للطلب على رقائق «بلاكويل» للذكاء الاصطناعي

أعلنت شركة «إنفيديا»، يوم الأربعاء، عن زيادة في أرباحها ومبيعاتها في الربع الثالث مع استمرار الطلب على رقائق الكمبيوتر المتخصصة.

«الشرق الأوسط» (نيويورك)

نظام «كريسبر» جديد لإسكات الجينات بدلاً من «قصّها»

نظام «كريسبر» جديد لإسكات الجينات بدلاً من «قصّها»
TT

نظام «كريسبر» جديد لإسكات الجينات بدلاً من «قصّها»

نظام «كريسبر» جديد لإسكات الجينات بدلاً من «قصّها»

توصَّل باحثون في «مركز علوم الحياة بجامعة» فيلنيوس في ليتوانيا، إلى اكتشاف طريقة جديدة رائدة في مجال البحث الجيني تسمح بإسكات (أو إيقاف عمل) جينات معينة دون إجراء قطع دائم للحمض النووي (دي إن إيه).

وتُقدِّم الدراسة مساراً جديداً محتملاً لتعديل الجينات بشكل أكثر أماناً يشبه الضغط على زر «إيقاف مؤقت» على التعليمات الجينية داخل الخلايا.

آلية عمل نظام «كريسبر» الجديد

اكتشف فريق البروفسور باتريك باوش من معهد الشراكة لتقنيات تحرير الجينوم بمركز العلوم الحياتية في جامعة فيلنيوس بليتوانيا، بالتعاون مع خبراء دوليين في البحث المنشور في مجلة «Nature Communications» في 29 أكتوبر (تشرين الأول) 2024، نظاماً جديداً مختلفاً للتعديل الجيني.

وعلى عكس نظام «كريسبر كاس9 (CRISPR-Cas9)»، المعروف الذي اشتهر بقدرته على قطع الحمض النووي (DNA)، يعمل نظام «كريسبر» من النوع «آي في إيه» (IV-A CRISPR) بشكل مختلف، حيث يستخدم مركباً موجهاً بالحمض النووي الريبي لإسكات الجينات دون انشقاق خيوط الحمض النووي «دي إن إيه (DNA)».

كما يستخدم النظام الجديد مركباً مؤثراً يجنِّد إنزيماً يُعرف باسم «دين جي (DinG)». ويعمل هذا الإنزيم عن طريق التحرك على طول خيط الحمض النووي (DNA)، وتسهيل إسكات الجينات من خلال عملية غير جراحية.

تقنية «كريسبر-كاس9» للقص الجيني

هي أداة تعمل كمقص جزيئي لقص تسلسلات معينة من الحمض النووي (دي إن إيه). وتستخدم الحمض النووي الريبي الموجه للعثور على الحمض النووي المستهدف. و«كاس9» هو البروتين الذي يقوم بالقص، وهذا ما يسمح للعلماء بتعديل الجينات عن طريق إضافة أو إزالة أو تغيير أجزاء من الحمض النووي، وهو ما قد يساعد على علاج الأمراض الوراثية، وتعزيز الأبحاث.

** آفاق جديدة لتعديل الجينات بشكل أكثر أماناً وغير جراحي

بروتينات وحلقات

يستخدم نظام «كريسبر» من النوع «IV-A» بروتينين مهمين، هما «Cas8»، و«Cas5» للعثور على بقع محددة على الحمض النووي (DNA). ويبحث هذان البروتينان عن تسلسل قصير من الحمض النووي بجوار المنطقة المستهدفة التي تتطابق مع دليل الحمض النووي الريبي. وبمجرد العثور عليه يبدآن في فك الحمض النووي وإنشاء هياكل تسمى حلقات «آر (R)».

وحلقات «آر» هي الأماكن التي يلتصق فيها الحمض النووي الريبي بخيط واحد من الحمض النووي (DNA)، وتعمل بوصفها إشارةً للنظام لبدء إيقاف أو إسكات الجين.

وكما أوضح البروفسور باوش، فإن «آر» في حلقة «R» تعني الحمض النووي الريبي. وهذه الهياكل أساسية لأنها تخبر النظام متى وأين يبدأ العمل. ولكي تكون حلقات «آر» مستقرةً وفعالةً يجب أن يتطابق الحمض النووي، ودليل الحمض النووي الريبي بشكل صحيح.

وظيفة إنزيم «دين جي»

يساعد إنزيم «DinG» نظام «كريسبر» على العمل بشكل أفضل من خلال فك خيوط الحمض النووي (DNA). وهذا يجعل من الأسهل على النظام التأثير على قسم أكبر من هذا الحمض النووي، ما يجعل عملية إسكات الجينات أكثر فعالية وتستمر لفترة أطول.

وأشار البروفسور باوش إلى أنه نظراً لأن إنزيم «DinG» يمكنه تغيير كيفية التعبير عن الجينات دون قطع الحمض النووي، فقد يؤدي ذلك إلى تطوير أدوات وراثية أكثر أماناً في المستقبل.

تطبيقات محتملة لتخفيف تلف الحمض النووي

يحمل الاكتشاف إمكانات هائلة لتحرير الجينوم والبحث في المستقبل، إذ يمكن أن تخفف الطبيعة غير القاطعة لهذه الطريقة من المخاطر المرتبطة بتلف الحمض النووي( DNA). وهو مصدر قلق عند توظيف تقنيات تحرير الجينات الحالية.

ومن خلال تمكين تعديل الجينات دون إحداث تغييرات دائمة في الحمض النووي( DNA) يمكن أن يكون هذا النهج الجديد مفيداً بشكل خاص في التطبيقات السريرية مثل العلاج الجيني للاضطرابات الوراثية. كما أن القدرة الفريدة لهذا النظام على عبور الحمض النووي دون إجراء قطع، أمر مثير للاهتمام لتطبيقات تحرير الجينات المتقدمة.

الدقة والسلامة

ويعتقد فريق البحث بأن هذه الطريقة يمكن أن تزوِّد العلماء وخبراء التكنولوجيا الحيوية بأدوات أكثر دقة لدراسة وظائف الجينات وتصحيح التشوهات الجينية بطريقة خاضعة للرقابة.

ويمثل الاكتشاف تقدماً كبيراً في مجال البحث الجيني؛ حيث يفتح نظام «كريسبر» من النوع «IV-A» آفاقاً جديدة لتعديل الجينات بشكل أكثر أماناً وغير جراحي، ويمكن أن تحدث هذه الطريقة ثورةً في كيفية دراسة الأمراض الوراثية وعلاجها، مع التركيز على الدقة والسلامة.