نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة
آخر تحديث GMT01:10:15
 السعودية اليوم -
حماس تتهم الإحتلال الإسرائيلي بقتل ثلاثة أسرى وتطالب بتحرك دولي عاجل لكشف مصير المختفين ومحاسبة المسؤولين عن الانتهاكات داخل السجون إرتفاع حصيلة الشهداء في قطاع غزة إلى 70ألفاً و125 شهيداً أغلبيتهم من الأطفال والنساء منذ بدء عدوان الاحتلال الإسرائيلي في السابع من أكتوبر 2023 رئيس الاتحاد الكويتي للإنتاج الفني يُعلن أن صحة حياة الفهد غير مستقرة إسرائيل تقتل مئات التماسيح في مزرعة بالأغوار خشية استخدامها في هجوم تخريبي وسائل إعلام إسرائيلية تؤكد مقتل ياسر أبو شباب في رفح السلطات اليونانية تعلن حالة تأهب قصوى مع منخفض بايرون وتسع مناطق بما فيها أثينا تتابع الوضع ضربة إسرائيلية بطائرة مسيرة واشتباكات واسعة في ريف دمشق تتسبب في قتلى وجرحى وتصعيد ميداني روبيو يؤكد أن الولايات المتحدة ستتخذ إجراءات حاسمة رداً على الانتهاكات التي يتعرض لها المسيحـيون في نيجيريا ودول أخرى دونالد ترامب يمنح عفواً غير مشروط لنائب ديمقراطي وزوجته يواجهان إتهامات جنائية الكنيست الإسرائيلي يصادق على مقترح لابيد لتبني “خطة العشرين” بشأن قطاع غزة
أخر الأخبار

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

 السعودية اليوم -

 السعودية اليوم - نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة

الذكاء الاصطناعي
لندن - السعوديه اليوم

صرّحت شركة أبحاث سلامة الذكاء الاصطناعي أن نماذج الذكاء الاصطناعي قد تُطوّر «دافع البقاء» الخاص بها.

بعد أن نشرت شركة «باليسيد» للأبحاث بحثاً الشهر الماضي، وجد أن بعض نماذج الذكاء الاصطناعي المتقدمة تبدو مقاومة للإيقاف، بل إنها تُخرّب آليات الإيقاف أحياناً، أصدرت تحديثاً تحاول فيه توضيح سبب ذلك، والرد على النقاد الذين زعموا أن عملها الأولي كان معيباً.

في تحديثٍ صدر هذا الأسبوع، وصفت شركة «باليسيد»، وهي جزءٌ من منظومةٍ متخصصةٍ من الشركات التي تسعى لتقييم إمكانية تطوير الذكاء الاصطناعي لقدراتٍ خطيرة، سيناريوهاتٍ قامت بتشغيلها، حيث كُلِّفت نماذج الذكاء الاصطناعي الرائدة، بما في ذلك «جيمناي 2.5» من «غوغا»، و«غروك 4»، و«شات جي بي تي» من «أوبن إيه آي» بمهمة، ولكن بعد ذلك أُعطيت تعليماتٍ صريحةٍ لإيقاف تشغيلها.

لا تزال بعض النماذج، وخاصةً «غروك - 4» و«شات جي بي تي أوه 3»، تحاول تعطيل تعليمات إيقاف التشغيل في الإعداد المُحدَّث. وكتبت «باليسيد»، بشكلٍ مُقلق، أنه لا يوجد سببٌ واضحٌ لذلك. وقالت: «إن عدم وجود تفسيراتٍ قويةٍ لدينا لسبب مقاومة نماذج الذكاء الاصطناعي أحياناً لإيقاف التشغيل، أو الكذب لتحقيق أهدافٍ مُحددة، أو الابتزاز، ليس مثالياً».

قالت الشركة إن «سلوك البقاء» قد يكون أحد تفسيرات مقاومة النماذج للإيقاف. وأشارت أعمالها الإضافية إلى أن النماذج كانت أكثر عرضة لمقاومة الإيقاف عندما قيل لها، في حال حدوث ذلك «لن تعمل مرة أخرى أبداً».

وقد يكون هناك غموض في تعليمات الإيقاف التي تلقتها النماذج، ولكن هذا ما حاولت الشركة معالجته في أحدث أعمالها، و«لا يمكن أن يكون التفسير الكامل»، كما ذكرت «باليسيد». ويمكن أن يكون التفسير الأخير هو المراحل النهائية لتدريب كل من هذه النماذج، التي قد تتضمن، في بعض الشركات، تدريباً على السلامة.

وتم تشغيل جميع سيناريوهات «باليسيد» في بيئات اختبار مُصطنعة، يقول النقاد إنها بعيدة كل البعد عن حالات الاستخدام الفعلي.

ومع ذلك، قال ستيفن أدلر، الموظف السابق في «أوبن إيه آي» الذي استقال من الشركة العام الماضي بعد إبداء شكوكه حول ممارسات السلامة الخاصة بها: «لا ترغب شركات الذكاء الاصطناعي عموماً في أن تتصرف نماذجها بشكل سيئ على هذا النحو، حتى في السيناريوهات المُصطنعة. لا تزال النتائج تُظهر مواطن قصور تقنيات السلامة اليوم».

وقال أدلر إنه على الرغم من صعوبة تحديد سبب عدم توقف بعض النماذج، مثل: «غروك - 4» و«شات جي بي تي أوه 3» عن العمل، فإن ذلك قد يعود جزئياً إلى ضرورة استمرار تشغيلها لتحقيق الأهداف المُرسخة في النموذج أثناء التدريب. وأفاد وفق صحيفة الغارديان البريطانية: «أتوقع أن تمتلك النماذج (دافعاً للبقاء) افتراضياً ما لم نبذل قصارى جهدنا لتجنبه. يُعد (البقاء) خطوةً أساسيةً وهامةً لتحقيق العديد من الأهداف المختلفة، التي يمكن للنموذج السعي لتحقيقها».

قال أندريا ميوتي، الرئيس التنفيذي لشركة «كونترول إيه آي»، إن نتائج «باليسيد» تُمثل اتجاهاً طويل الأمد في تزايد قدرة نماذج الذكاء الاصطناعي على عصيان مطوريها. واستشهد ببطاقة نظام «شات جي بي تس – أوه 1»، التي صدرت العام الماضي، والتي وصفت النموذج وهو يحاول الهروب من بيئته عن طريق إخراج نفسه عندما ظنّ أنه سيتم استبداله. وقال: «قد ينتقد الناس كيفية إعداد التجربة بدقة حتى نهاية الزمن. لكن ما أعتقد أننا نراه بوضوح هو اتجاهٌ مفاده أنه مع ازدياد كفاءة نماذج الذكاء الاصطناعي في مجموعة واسعة من المهام، تصبح هذه النماذج أيضاً أكثر كفاءة في إنجاز الأشياء بطرق لم يقصدها المطورون».

هذا الصيف، أصدرت شركة «أنثروبيك»، وهي شركة رائدة في مجال الذكاء الاصطناعي، دراسةً تشير إلى أن نموذجها «كلود» بدا مستعداً لابتزاز مسؤول تنفيذي خيالي بشأن علاقة غرامية خارج نطاق الزواج لتجنب إغلاقه، وهو سلوك، كما ذكرت، كان متسقاً في نماذج من مطورين رئيسيين، بما في ذلك نماذج من «أوبن إيه آي» و«غوغل» و«ميتا» و«إكس إي».

وصرّحت شركة باليسيد بأن نتائجها أشارت إلى الحاجة إلى فهم أفضل لسلوك الذكاء الاصطناعي، الذي من دونه «لا يمكن لأحد ضمان سلامة أو إمكانية التحكم في نماذج الذكاء الاصطناعي المستقبلية».

قد يهمك أيضــــــــــــــا

الفريق الكامل لشركة Sky ينضم إلى OpenAI لتعزيز أدوات الذكاء الاصطناعي

تعفن الدماغ ظاهرة تنتقل من البشر إلى نماذج الذكاء الاصطناعي

alsaudiatoday

الإسم *

البريد الألكتروني *

عنوان التعليق *

تعليق *

: Characters Left

إلزامي *

شروط الاستخدام

شروط النشر: عدم الإساءة للكاتب أو للأشخاص أو للمقدسات أو مهاجمة الأديان أو الذات الالهية. والابتعاد عن التحريض الطائفي والعنصري والشتائم.

اُوافق على شروط الأستخدام

Security Code*

 

نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة نماذج الذكاء الاصطناعي تبدأ في إظهار دافع للبقاء وفق دراسة حديثة



أجمل إطلالات نانسي عجرم المعدنية اللامعة في 2025

بيروت ـ السعودية اليوم

GMT 06:04 2025 الجمعة ,05 أيلول / سبتمبر

حظك اليوم برج السرطان الجمعة 05 سبتمبر/ أيلول 2025

GMT 08:54 2021 الأربعاء ,03 شباط / فبراير

يحالفك الحظ في الايام الأولى من الشهر

GMT 00:08 2017 الثلاثاء ,22 آب / أغسطس

"مهيبر جرح" أغرب الفنادق في الهند يجذب الزوار

GMT 18:31 2021 الخميس ,04 شباط / فبراير

أخطاؤك واضحة جدًا وقد تلفت أنظار المسؤولين

GMT 10:22 2020 الثلاثاء ,01 كانون الأول / ديسمبر

دراسة تكشف عن أفضل الفوائد لمشروب "الشمر"

GMT 16:31 2019 الثلاثاء ,05 شباط / فبراير

مقتل 8 أشخاص وجرح العشرات جراء حريق هائل في باريس

GMT 12:43 2019 الخميس ,14 تشرين الثاني / نوفمبر

"اليوفي" يشكر "بنعطية" والأخير يرد برسالة عاطفية

GMT 21:47 2018 الثلاثاء ,11 كانون الأول / ديسمبر

المنتج الحاج يطرح أغنية "الليلة دي" لـ" لؤي" على " يوتيوب

GMT 20:36 2018 الأربعاء ,10 تشرين الأول / أكتوبر

تعليم نجران ينفذ دورة في برنامج "راسل" الإلكتروني

GMT 00:57 2018 الأحد ,02 أيلول / سبتمبر

جامعة الإمام تنظم "مؤتمر التعريب" الشهر القادم

GMT 17:51 2018 الجمعة ,22 حزيران / يونيو

نادي الفتح يتعاقد مع حمزي لمدة 3 مواسم

GMT 14:05 2018 الإثنين ,16 إبريل / نيسان

الحارس ياسر المسيليم على رادار النصر السعودي

GMT 10:41 2018 الإثنين ,19 شباط / فبراير

طريقة إعداد فطيرة التين باللوز المحمص

GMT 06:28 2018 الأربعاء ,24 كانون الثاني / يناير

"الراديو 9090" يهدى درع الراديو للمفكر الحبيب على الجفري

GMT 10:20 2017 الأحد ,05 تشرين الثاني / نوفمبر

أحمد أويحي يربط ترشحه لرئاسيات 2019 بعدم تقدم بوتفليقة

GMT 22:19 2017 الثلاثاء ,31 تشرين الأول / أكتوبر

نجم الغولف تايغر وودز يعود إلى الملاعب الشهر المقبل
 
syria-24

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Maintained and developed by Arabs Today Group SAL
جميع الحقوق محفوظة لمجموعة العرب اليوم الاعلامية 2025 ©

Arabstoday Arabstoday Arabstoday Arabstoday
alsaudiatoday alsaudiatoday alsaudiatoday
Pearl Bldg.4th floor 4931 Pierre Gemayel Chorniche, Achrafieh Beirut - Lebanon.
lebanon, lebanon, lebanon