نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة
آخر تحديث GMT09:12:12
 السعودية اليوم -

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

 السعودية اليوم -

 السعودية اليوم - نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

الذكاء الاصطناعي
لندن - السعوديه اليوم

صرّحت شركة أبحاث سلامة الذكاء الاصطناعي أن نماذج الذكاء الاصطناعي قد تُطوّر «دافع البقاء» الخاص بها.

بعد أن نشرت شركة «باليسيد» للأبحاث بحثاً الشهر الماضي، وجد أن بعض نماذج الذكاء الاصطناعي المتقدمة تبدو مقاومة للإيقاف، بل إنها تُخرّب آليات الإيقاف أحياناً، أصدرت تحديثاً تحاول فيه توضيح سبب ذلك، والرد على النقاد الذين زعموا أن عملها الأولي كان معيباً.

في تحديثٍ صدر هذا الأسبوع، وصفت شركة «باليسيد»، وهي جزءٌ من منظومةٍ متخصصةٍ من الشركات التي تسعى لتقييم إمكانية تطوير الذكاء الاصطناعي لقدراتٍ خطيرة، سيناريوهاتٍ قامت بتشغيلها، حيث كُلِّفت نماذج الذكاء الاصطناعي الرائدة، بما في ذلك «جيمناي 2.5» من «غوغا»، و«غروك 4»، و«شات جي بي تي» من «أوبن إيه آي» بمهمة، ولكن بعد ذلك أُعطيت تعليماتٍ صريحةٍ لإيقاف تشغيلها.

لا تزال بعض النماذج، وخاصةً «غروك - 4» و«شات جي بي تي أوه 3»، تحاول تعطيل تعليمات إيقاف التشغيل في الإعداد المُحدَّث. وكتبت «باليسيد»، بشكلٍ مُقلق، أنه لا يوجد سببٌ واضحٌ لذلك. وقالت: «إن عدم وجود تفسيراتٍ قويةٍ لدينا لسبب مقاومة نماذج الذكاء الاصطناعي أحياناً لإيقاف التشغيل، أو الكذب لتحقيق أهدافٍ مُحددة، أو الابتزاز، ليس مثالياً».

قالت الشركة إن «سلوك البقاء» قد يكون أحد تفسيرات مقاومة النماذج للإيقاف. وأشارت أعمالها الإضافية إلى أن النماذج كانت أكثر عرضة لمقاومة الإيقاف عندما قيل لها، في حال حدوث ذلك «لن تعمل مرة أخرى أبداً».

وقد يكون هناك غموض في تعليمات الإيقاف التي تلقتها النماذج، ولكن هذا ما حاولت الشركة معالجته في أحدث أعمالها، و«لا يمكن أن يكون التفسير الكامل»، كما ذكرت «باليسيد». ويمكن أن يكون التفسير الأخير هو المراحل النهائية لتدريب كل من هذه النماذج، التي قد تتضمن، في بعض الشركات، تدريباً على السلامة.

وتم تشغيل جميع سيناريوهات «باليسيد» في بيئات اختبار مُصطنعة، يقول النقاد إنها بعيدة كل البعد عن حالات الاستخدام الفعلي.

ومع ذلك، قال ستيفن أدلر، الموظف السابق في «أوبن إيه آي» الذي استقال من الشركة العام الماضي بعد إبداء شكوكه حول ممارسات السلامة الخاصة بها: «لا ترغب شركات الذكاء الاصطناعي عموماً في أن تتصرف نماذجها بشكل سيئ على هذا النحو، حتى في السيناريوهات المُصطنعة. لا تزال النتائج تُظهر مواطن قصور تقنيات السلامة اليوم».

وقال أدلر إنه على الرغم من صعوبة تحديد سبب عدم توقف بعض النماذج، مثل: «غروك - 4» و«شات جي بي تي أوه 3» عن العمل، فإن ذلك قد يعود جزئياً إلى ضرورة استمرار تشغيلها لتحقيق الأهداف المُرسخة في النموذج أثناء التدريب. وأفاد وفق صحيفة الغارديان البريطانية: «أتوقع أن تمتلك النماذج (دافعاً للبقاء) افتراضياً ما لم نبذل قصارى جهدنا لتجنبه. يُعد (البقاء) خطوةً أساسيةً وهامةً لتحقيق العديد من الأهداف المختلفة، التي يمكن للنموذج السعي لتحقيقها».

قال أندريا ميوتي، الرئيس التنفيذي لشركة «كونترول إيه آي»، إن نتائج «باليسيد» تُمثل اتجاهاً طويل الأمد في تزايد قدرة نماذج الذكاء الاصطناعي على عصيان مطوريها. واستشهد ببطاقة نظام «شات جي بي تس – أوه 1»، التي صدرت العام الماضي، والتي وصفت النموذج وهو يحاول الهروب من بيئته عن طريق إخراج نفسه عندما ظنّ أنه سيتم استبداله. وقال: «قد ينتقد الناس كيفية إعداد التجربة بدقة حتى نهاية الزمن. لكن ما أعتقد أننا نراه بوضوح هو اتجاهٌ مفاده أنه مع ازدياد كفاءة نماذج الذكاء الاصطناعي في مجموعة واسعة من المهام، تصبح هذه النماذج أيضاً أكثر كفاءة في إنجاز الأشياء بطرق لم يقصدها المطورون».

هذا الصيف، أصدرت شركة «أنثروبيك»، وهي شركة رائدة في مجال الذكاء الاصطناعي، دراسةً تشير إلى أن نموذجها «كلود» بدا مستعداً لابتزاز مسؤول تنفيذي خيالي بشأن علاقة غرامية خارج نطاق الزواج لتجنب إغلاقه، وهو سلوك، كما ذكرت، كان متسقاً في نماذج من مطورين رئيسيين، بما في ذلك نماذج من «أوبن إيه آي» و«غوغل» و«ميتا» و«إكس إي».

وصرّحت شركة باليسيد بأن نتائجها أشارت إلى الحاجة إلى فهم أفضل لسلوك الذكاء الاصطناعي، الذي من دونه «لا يمكن لأحد ضمان سلامة أو إمكانية التحكم في نماذج الذكاء الاصطناعي المستقبلية».

قد يهمك أيضــــــــــــــا

الفريق الكامل لشركة Sky ينضم إلى OpenAI لتعزيز أدوات الذكاء الاصطناعي

تعفن الدماغ ظاهرة تنتقل من البشر إلى نماذج الذكاء الاصطناعي

alsaudiatoday

الإسم *

البريد الألكتروني *

عنوان التعليق *

تعليق *

: Characters Left

إلزامي *

شروط الاستخدام

شروط النشر: عدم الإساءة للكاتب أو للأشخاص أو للمقدسات أو مهاجمة الأديان أو الذات الالهية. والابتعاد عن التحريض الطائفي والعنصري والشتائم.

اُوافق على شروط الأستخدام

Security Code*

 

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة



نساء العائلة الملكية الأردنية يتألقنّ بإطلالات رمضانية وقورة

عمان - السعودية اليوم

GMT 22:32 2018 الثلاثاء ,26 حزيران / يونيو

4 علامات تكشف تعرض جهاز الكمبيوتر للاختراق

GMT 19:11 2017 الخميس ,14 كانون الأول / ديسمبر

كليب "3 دقات" يحقق 55 مليون ونص مشاهدة على اليوتيوب

GMT 17:01 2014 الثلاثاء ,18 شباط / فبراير

صوبات الأمير وراء صحوة الأردن

GMT 02:12 2014 الإثنين ,29 كانون الأول / ديسمبر

رانية عجمية تنصح باستخدام عجينة "السيراميك" في الزينة

GMT 07:32 2014 الثلاثاء ,18 آذار/ مارس

A kind Of Guise تطلق تشكيلتها الجديدة

GMT 23:04 2020 الثلاثاء ,04 شباط / فبراير

زلزال يضرب جنوب الجيزة بقوة 2.53 ريختر

GMT 08:09 2020 الخميس ,09 كانون الثاني / يناير

مصرع والد الفنان المصري إيهاب توفيق في حريق

GMT 20:36 2019 الخميس ,10 كانون الثاني / يناير

7 أطعمة لعلاج نقص الهيموجلوبين خلال الحمل

GMT 11:58 2017 الإثنين ,25 أيلول / سبتمبر

وفد من جامعة بابل العراقية يزور الزرقاء الأهلية

GMT 07:23 2016 الأربعاء ,07 كانون الأول / ديسمبر

الرقي والكلاسيكية شعار تشكيلة ماكس مارا "Max Mara" لشتاء 2017

GMT 07:56 2020 الثلاثاء ,14 تموز / يوليو

طرق مذهلة لـ إخفاء الهالات السوداء بالمكياج

GMT 00:56 2020 الخميس ,23 كانون الثاني / يناير

اهتمامات الصحف المصرية الأربعاء

GMT 03:05 2019 الثلاثاء ,12 تشرين الثاني / نوفمبر

هيدي كرم تؤكد أن ابنها يخشى مشاهدتها في "نقطة رجوع"

GMT 11:33 2019 الخميس ,03 تشرين الأول / أكتوبر

خادم الحرمين الشريفين يصل إلى الرياض قادماً من جدة
 
syria-24

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Arabstoday Arabstoday Arabstoday Arabstoday
alsaudiatoday alsaudiatoday alsaudiatoday
Pearl Bldg.4th floor 4931 Pierre Gemayel Chorniche, Achrafieh Beirut - Lebanon.
lebanon, lebanon, lebanon