نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة
آخر تحديث GMT22:25:20
 السعودية اليوم -

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

 السعودية اليوم -

 السعودية اليوم - نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

الذكاء الاصطناعي
لندن - السعوديه اليوم

صرّحت شركة أبحاث سلامة الذكاء الاصطناعي أن نماذج الذكاء الاصطناعي قد تُطوّر «دافع البقاء» الخاص بها.

بعد أن نشرت شركة «باليسيد» للأبحاث بحثاً الشهر الماضي، وجد أن بعض نماذج الذكاء الاصطناعي المتقدمة تبدو مقاومة للإيقاف، بل إنها تُخرّب آليات الإيقاف أحياناً، أصدرت تحديثاً تحاول فيه توضيح سبب ذلك، والرد على النقاد الذين زعموا أن عملها الأولي كان معيباً.

في تحديثٍ صدر هذا الأسبوع، وصفت شركة «باليسيد»، وهي جزءٌ من منظومةٍ متخصصةٍ من الشركات التي تسعى لتقييم إمكانية تطوير الذكاء الاصطناعي لقدراتٍ خطيرة، سيناريوهاتٍ قامت بتشغيلها، حيث كُلِّفت نماذج الذكاء الاصطناعي الرائدة، بما في ذلك «جيمناي 2.5» من «غوغا»، و«غروك 4»، و«شات جي بي تي» من «أوبن إيه آي» بمهمة، ولكن بعد ذلك أُعطيت تعليماتٍ صريحةٍ لإيقاف تشغيلها.

لا تزال بعض النماذج، وخاصةً «غروك - 4» و«شات جي بي تي أوه 3»، تحاول تعطيل تعليمات إيقاف التشغيل في الإعداد المُحدَّث. وكتبت «باليسيد»، بشكلٍ مُقلق، أنه لا يوجد سببٌ واضحٌ لذلك. وقالت: «إن عدم وجود تفسيراتٍ قويةٍ لدينا لسبب مقاومة نماذج الذكاء الاصطناعي أحياناً لإيقاف التشغيل، أو الكذب لتحقيق أهدافٍ مُحددة، أو الابتزاز، ليس مثالياً».

قالت الشركة إن «سلوك البقاء» قد يكون أحد تفسيرات مقاومة النماذج للإيقاف. وأشارت أعمالها الإضافية إلى أن النماذج كانت أكثر عرضة لمقاومة الإيقاف عندما قيل لها، في حال حدوث ذلك «لن تعمل مرة أخرى أبداً».

وقد يكون هناك غموض في تعليمات الإيقاف التي تلقتها النماذج، ولكن هذا ما حاولت الشركة معالجته في أحدث أعمالها، و«لا يمكن أن يكون التفسير الكامل»، كما ذكرت «باليسيد». ويمكن أن يكون التفسير الأخير هو المراحل النهائية لتدريب كل من هذه النماذج، التي قد تتضمن، في بعض الشركات، تدريباً على السلامة.

وتم تشغيل جميع سيناريوهات «باليسيد» في بيئات اختبار مُصطنعة، يقول النقاد إنها بعيدة كل البعد عن حالات الاستخدام الفعلي.

ومع ذلك، قال ستيفن أدلر، الموظف السابق في «أوبن إيه آي» الذي استقال من الشركة العام الماضي بعد إبداء شكوكه حول ممارسات السلامة الخاصة بها: «لا ترغب شركات الذكاء الاصطناعي عموماً في أن تتصرف نماذجها بشكل سيئ على هذا النحو، حتى في السيناريوهات المُصطنعة. لا تزال النتائج تُظهر مواطن قصور تقنيات السلامة اليوم».

وقال أدلر إنه على الرغم من صعوبة تحديد سبب عدم توقف بعض النماذج، مثل: «غروك - 4» و«شات جي بي تي أوه 3» عن العمل، فإن ذلك قد يعود جزئياً إلى ضرورة استمرار تشغيلها لتحقيق الأهداف المُرسخة في النموذج أثناء التدريب. وأفاد وفق صحيفة الغارديان البريطانية: «أتوقع أن تمتلك النماذج (دافعاً للبقاء) افتراضياً ما لم نبذل قصارى جهدنا لتجنبه. يُعد (البقاء) خطوةً أساسيةً وهامةً لتحقيق العديد من الأهداف المختلفة، التي يمكن للنموذج السعي لتحقيقها».

قال أندريا ميوتي، الرئيس التنفيذي لشركة «كونترول إيه آي»، إن نتائج «باليسيد» تُمثل اتجاهاً طويل الأمد في تزايد قدرة نماذج الذكاء الاصطناعي على عصيان مطوريها. واستشهد ببطاقة نظام «شات جي بي تس – أوه 1»، التي صدرت العام الماضي، والتي وصفت النموذج وهو يحاول الهروب من بيئته عن طريق إخراج نفسه عندما ظنّ أنه سيتم استبداله. وقال: «قد ينتقد الناس كيفية إعداد التجربة بدقة حتى نهاية الزمن. لكن ما أعتقد أننا نراه بوضوح هو اتجاهٌ مفاده أنه مع ازدياد كفاءة نماذج الذكاء الاصطناعي في مجموعة واسعة من المهام، تصبح هذه النماذج أيضاً أكثر كفاءة في إنجاز الأشياء بطرق لم يقصدها المطورون».

هذا الصيف، أصدرت شركة «أنثروبيك»، وهي شركة رائدة في مجال الذكاء الاصطناعي، دراسةً تشير إلى أن نموذجها «كلود» بدا مستعداً لابتزاز مسؤول تنفيذي خيالي بشأن علاقة غرامية خارج نطاق الزواج لتجنب إغلاقه، وهو سلوك، كما ذكرت، كان متسقاً في نماذج من مطورين رئيسيين، بما في ذلك نماذج من «أوبن إيه آي» و«غوغل» و«ميتا» و«إكس إي».

وصرّحت شركة باليسيد بأن نتائجها أشارت إلى الحاجة إلى فهم أفضل لسلوك الذكاء الاصطناعي، الذي من دونه «لا يمكن لأحد ضمان سلامة أو إمكانية التحكم في نماذج الذكاء الاصطناعي المستقبلية».

قد يهمك أيضــــــــــــــا

الفريق الكامل لشركة Sky ينضم إلى OpenAI لتعزيز أدوات الذكاء الاصطناعي

تعفن الدماغ ظاهرة تنتقل من البشر إلى نماذج الذكاء الاصطناعي

alsaudiatoday

الإسم *

البريد الألكتروني *

عنوان التعليق *

تعليق *

: Characters Left

إلزامي *

شروط الاستخدام

شروط النشر: عدم الإساءة للكاتب أو للأشخاص أو للمقدسات أو مهاجمة الأديان أو الذات الالهية. والابتعاد عن التحريض الطائفي والعنصري والشتائم.

اُوافق على شروط الأستخدام

Security Code*

 

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة



إطلالات النجمات الحوامل أناقة عصرية تجمع الراحة والفخامة

القاهرة - السعودية اليوم

GMT 16:59 2021 الخميس ,07 كانون الثاني / يناير

حظك اليوم برج الجدي الخميس 7 يناير/كانون الثاني 2021

GMT 11:41 2021 الأربعاء ,03 شباط / فبراير

يحاول أحد الزملاء أن يوقعك في مؤامرة خطيرة

GMT 18:41 2021 الخميس ,04 شباط / فبراير

التفرد والعناد يؤديان حتماً إلى عواقب وخيمة

GMT 22:29 2019 السبت ,07 كانون الأول / ديسمبر

... أفكار عملية ومبتكرة لترتيب النباتات في منزلك

GMT 14:05 2019 الأربعاء ,30 تشرين الأول / أكتوبر

"أبو عيطة" الرئيس الفلسطيني مُصرّ على الذهاب إلي الانتخابات

GMT 03:24 2019 الثلاثاء ,05 آذار/ مارس

جامعة بنى سويف تنهى خدمة أستاذين بـ"طب بيطرى"

GMT 15:11 2018 الأحد ,30 كانون الأول / ديسمبر

النصر ينفي تعاقد نادي أحد مع المغربي محمد فوزير

GMT 10:26 2021 الخميس ,21 كانون الثاني / يناير

بايدن يَنتظِرُ إدارةً لبنانيّةً جديدة

GMT 17:31 2019 الأحد ,10 تشرين الثاني / نوفمبر

الإعلامي جابر القرموطي يتجه للغناء

GMT 07:18 2019 الأحد ,20 تشرين الأول / أكتوبر

"الإفتاء" توضح حكم تارك الصلاة وإجهاض الجنين المشوه

GMT 03:48 2019 الأحد ,14 إبريل / نيسان

تعرف علي توقعات أحوال الطقس في عمان الأحد

GMT 00:10 2018 الخميس ,27 كانون الأول / ديسمبر

اتبعي هذه النصائح كي لا يتزوج زوجكِ عليكِ

GMT 20:53 2018 الإثنين ,17 كانون الأول / ديسمبر

المشروم يحد من خطر الإصابة بسرطان عنق الرحم

GMT 15:39 2018 السبت ,10 تشرين الثاني / نوفمبر

ماكس فيرستابن يحقق أفضل زمن في التجربة الحرة الأولى

GMT 23:56 2018 الثلاثاء ,23 تشرين الأول / أكتوبر

الجيش اللبناني يعزز وجوده حول «المية ومية»
 
syria-24

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Arabstoday Arabstoday Arabstoday Arabstoday
alsaudiatoday alsaudiatoday alsaudiatoday
Pearl Bldg.4th floor 4931 Pierre Gemayel Chorniche, Achrafieh Beirut - Lebanon.
lebanon, lebanon, lebanon