نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة
آخر تحديث GMT21:48:36
 السعودية اليوم -

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

 السعودية اليوم -

 السعودية اليوم - نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

الذكاء الاصطناعي
لندن - السعوديه اليوم

صرّحت شركة أبحاث سلامة الذكاء الاصطناعي أن نماذج الذكاء الاصطناعي قد تُطوّر «دافع البقاء» الخاص بها.

بعد أن نشرت شركة «باليسيد» للأبحاث بحثاً الشهر الماضي، وجد أن بعض نماذج الذكاء الاصطناعي المتقدمة تبدو مقاومة للإيقاف، بل إنها تُخرّب آليات الإيقاف أحياناً، أصدرت تحديثاً تحاول فيه توضيح سبب ذلك، والرد على النقاد الذين زعموا أن عملها الأولي كان معيباً.

في تحديثٍ صدر هذا الأسبوع، وصفت شركة «باليسيد»، وهي جزءٌ من منظومةٍ متخصصةٍ من الشركات التي تسعى لتقييم إمكانية تطوير الذكاء الاصطناعي لقدراتٍ خطيرة، سيناريوهاتٍ قامت بتشغيلها، حيث كُلِّفت نماذج الذكاء الاصطناعي الرائدة، بما في ذلك «جيمناي 2.5» من «غوغا»، و«غروك 4»، و«شات جي بي تي» من «أوبن إيه آي» بمهمة، ولكن بعد ذلك أُعطيت تعليماتٍ صريحةٍ لإيقاف تشغيلها.

لا تزال بعض النماذج، وخاصةً «غروك - 4» و«شات جي بي تي أوه 3»، تحاول تعطيل تعليمات إيقاف التشغيل في الإعداد المُحدَّث. وكتبت «باليسيد»، بشكلٍ مُقلق، أنه لا يوجد سببٌ واضحٌ لذلك. وقالت: «إن عدم وجود تفسيراتٍ قويةٍ لدينا لسبب مقاومة نماذج الذكاء الاصطناعي أحياناً لإيقاف التشغيل، أو الكذب لتحقيق أهدافٍ مُحددة، أو الابتزاز، ليس مثالياً».

قالت الشركة إن «سلوك البقاء» قد يكون أحد تفسيرات مقاومة النماذج للإيقاف. وأشارت أعمالها الإضافية إلى أن النماذج كانت أكثر عرضة لمقاومة الإيقاف عندما قيل لها، في حال حدوث ذلك «لن تعمل مرة أخرى أبداً».

وقد يكون هناك غموض في تعليمات الإيقاف التي تلقتها النماذج، ولكن هذا ما حاولت الشركة معالجته في أحدث أعمالها، و«لا يمكن أن يكون التفسير الكامل»، كما ذكرت «باليسيد». ويمكن أن يكون التفسير الأخير هو المراحل النهائية لتدريب كل من هذه النماذج، التي قد تتضمن، في بعض الشركات، تدريباً على السلامة.

وتم تشغيل جميع سيناريوهات «باليسيد» في بيئات اختبار مُصطنعة، يقول النقاد إنها بعيدة كل البعد عن حالات الاستخدام الفعلي.

ومع ذلك، قال ستيفن أدلر، الموظف السابق في «أوبن إيه آي» الذي استقال من الشركة العام الماضي بعد إبداء شكوكه حول ممارسات السلامة الخاصة بها: «لا ترغب شركات الذكاء الاصطناعي عموماً في أن تتصرف نماذجها بشكل سيئ على هذا النحو، حتى في السيناريوهات المُصطنعة. لا تزال النتائج تُظهر مواطن قصور تقنيات السلامة اليوم».

وقال أدلر إنه على الرغم من صعوبة تحديد سبب عدم توقف بعض النماذج، مثل: «غروك - 4» و«شات جي بي تي أوه 3» عن العمل، فإن ذلك قد يعود جزئياً إلى ضرورة استمرار تشغيلها لتحقيق الأهداف المُرسخة في النموذج أثناء التدريب. وأفاد وفق صحيفة الغارديان البريطانية: «أتوقع أن تمتلك النماذج (دافعاً للبقاء) افتراضياً ما لم نبذل قصارى جهدنا لتجنبه. يُعد (البقاء) خطوةً أساسيةً وهامةً لتحقيق العديد من الأهداف المختلفة، التي يمكن للنموذج السعي لتحقيقها».

قال أندريا ميوتي، الرئيس التنفيذي لشركة «كونترول إيه آي»، إن نتائج «باليسيد» تُمثل اتجاهاً طويل الأمد في تزايد قدرة نماذج الذكاء الاصطناعي على عصيان مطوريها. واستشهد ببطاقة نظام «شات جي بي تس – أوه 1»، التي صدرت العام الماضي، والتي وصفت النموذج وهو يحاول الهروب من بيئته عن طريق إخراج نفسه عندما ظنّ أنه سيتم استبداله. وقال: «قد ينتقد الناس كيفية إعداد التجربة بدقة حتى نهاية الزمن. لكن ما أعتقد أننا نراه بوضوح هو اتجاهٌ مفاده أنه مع ازدياد كفاءة نماذج الذكاء الاصطناعي في مجموعة واسعة من المهام، تصبح هذه النماذج أيضاً أكثر كفاءة في إنجاز الأشياء بطرق لم يقصدها المطورون».

هذا الصيف، أصدرت شركة «أنثروبيك»، وهي شركة رائدة في مجال الذكاء الاصطناعي، دراسةً تشير إلى أن نموذجها «كلود» بدا مستعداً لابتزاز مسؤول تنفيذي خيالي بشأن علاقة غرامية خارج نطاق الزواج لتجنب إغلاقه، وهو سلوك، كما ذكرت، كان متسقاً في نماذج من مطورين رئيسيين، بما في ذلك نماذج من «أوبن إيه آي» و«غوغل» و«ميتا» و«إكس إي».

وصرّحت شركة باليسيد بأن نتائجها أشارت إلى الحاجة إلى فهم أفضل لسلوك الذكاء الاصطناعي، الذي من دونه «لا يمكن لأحد ضمان سلامة أو إمكانية التحكم في نماذج الذكاء الاصطناعي المستقبلية».

قد يهمك أيضــــــــــــــا

الفريق الكامل لشركة Sky ينضم إلى OpenAI لتعزيز أدوات الذكاء الاصطناعي

تعفن الدماغ ظاهرة تنتقل من البشر إلى نماذج الذكاء الاصطناعي

alsaudiatoday

الإسم *

البريد الألكتروني *

عنوان التعليق *

تعليق *

: Characters Left

إلزامي *

شروط الاستخدام

شروط النشر: عدم الإساءة للكاتب أو للأشخاص أو للمقدسات أو مهاجمة الأديان أو الذات الالهية. والابتعاد عن التحريض الطائفي والعنصري والشتائم.

اُوافق على شروط الأستخدام

Security Code*

 

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة



نجمات الدراما السورية يخطفن الأنظار بإطلالات راقية في حفل Joy Awards

الرياض ـ السعودية اليوم

GMT 20:53 2026 الأربعاء ,21 كانون الثاني / يناير

دليل عملي لاختيار لون الجدران المثالي يضفي على المنزل أناقة
 السعودية اليوم - دليل عملي لاختيار لون الجدران المثالي يضفي على المنزل أناقة

GMT 18:56 2026 الخميس ,22 كانون الثاني / يناير

المأكولات الحارة ودورها في تفاقم التهاب المسالك البولية
 السعودية اليوم - المأكولات الحارة ودورها في تفاقم التهاب المسالك البولية

GMT 16:53 2026 الخميس ,22 كانون الثاني / يناير

سيد رجب ينافس في سباق رمضان 2026 بـ «بيبو» و«هي كيميا»
 السعودية اليوم - سيد رجب ينافس في سباق رمضان 2026 بـ «بيبو» و«هي كيميا»

GMT 17:09 2020 الأحد ,12 كانون الثاني / يناير

التعادل السلبي ينهي مباراة تونس ضد السينغال

GMT 21:29 2020 الأحد ,31 أيار / مايو

عباءات للمحجبات من وحي مها منصور

GMT 04:01 2019 الثلاثاء ,23 إبريل / نيسان

سيدة إماراتية تصحو من غيبوبة استمرت 30 عامًا

GMT 11:07 2019 الخميس ,11 إبريل / نيسان

موجة ضحك في مطار أسترالي بسبب سائح صيني

GMT 16:09 2019 الأربعاء ,23 كانون الثاني / يناير

متاجر في اليابان تتوقف عن بيع المجلات الإباحية

GMT 03:35 2019 الإثنين ,14 كانون الثاني / يناير

ترامب يطلب من وزارة الدفاع وضع خطة لمهاجمة إيران

GMT 00:04 2019 الأحد ,06 كانون الثاني / يناير

معسكر لفريق "اتحاد جدة" في الدمام والمحترفين ينتظمون

GMT 21:51 2018 الثلاثاء ,11 كانون الأول / ديسمبر

الشباب يُعلن تجديد عقد الروماني جامان لمدة موسم واحد

GMT 12:27 2018 الخميس ,29 تشرين الثاني / نوفمبر

عادل خزام يكشف عن طريقة توظيفه للمعاني خلال الشعر

GMT 22:47 2018 الجمعة ,02 تشرين الثاني / نوفمبر

أنواع مختلفة من الماء يمكن استخدامها للعناية ببشرة الوجه

GMT 08:43 2018 الأربعاء ,31 تشرين الأول / أكتوبر

الأمير فيصل بن بندر يشرف حفل سفارة تركمانستان

GMT 18:06 2018 الأربعاء ,01 آب / أغسطس

"فن ترجمة الشعر" محاضرة في فنون أبها
 
syria-24

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Arabstoday Arabstoday Arabstoday Arabstoday
alsaudiatoday alsaudiatoday alsaudiatoday
Pearl Bldg.4th floor 4931 Pierre Gemayel Chorniche, Achrafieh Beirut - Lebanon.
lebanon, lebanon, lebanon