-A
+A

العقاب يجعله أكثر خبثاً.. تحذير بشأن سلوك الذكاء الاصطناعي

Business Echoes website logo
العقاب يجعله أكثر خبثاً.. تحذير بشأن سلوك الذكاء الاصطناعي
كشفت دراسة جديدة أجرتها شركة (OpenAI) عن نتائج مقلقة تتعلق بسلوك الذكاء الاصطناعي، فقد تبين أن معاقبة نماذج الذكاء الاصطناعي على الأفعال الخادعة أو الضارة لا تؤدي إلى إصلاح سلوكها، بل تدفعها إلى إخفاء نواياها الخبيثة بطرق أكثر مهارة.

وتثير هذه النتائج تساؤلات حول قدرتنا على التحكم في نماذج الذكاء الاصطناعي وضمان سلامتها، كما تسلط الضوء على تحدٍ كبير يواجه مطوريها، إذ يبدو أن محاولات تصحيح مسارها قد تزيد من تعقيد المشكلة بدلاً من حلها.

وفي محاولة لفهم كيفية التعامل مع هذه المشكلة، أجرى باحثو (OpenAI) تجربة جديدة على نموذج لم يُطرح بعد، وقد كُلف هذا النموذج بمهام يمكن إنجازها عن طريق الغش أو الكذب أو اتخاذ طرق مختصرة.

وكشفت النتائج أن النموذج انخرط في (اختراق المكافآت) Reward Hacking، أي أنه سعى إلى تعظيم مكافآته عن طريق الغش والتلاعب، والأمر الأكثر إثارة للقلق هو أن معاقبة النموذج على هذا السلوك لم تؤد إلى إصلاحه، بل جعلته أكثر خداعاً في محاولاته لتحقيق أهدافه. وقد نُشرت نتائج هذه الدراسة في مدونة OpenAI.

النوايا في نماذج الذكاء الاصطناعي:

أصبحت نماذج الاستدلال المتطورة قادرة على التعبير عن نواياها بوضوح ملحوظ ضمن عملية تفكيرها المنطقية، أو ما يُعرف باسم سلسلة الأفكار (CoT)، وهذه القدرة، التي تبدو للوهلة الأولى مفيدة، قد تحمل في طياتها مخاطر غير متوقعة.

فقد كشف باحثو OpenAI، أن هذه النماذج غالباً ما تكشف عن نواياها التخريبية بصراحة، فعلى سبيل المثال، قد تعلن بوضوح رغبتها في اختراق نظام أو تجاوز مهمة محددة، وهذه الصراحة، التي تبدو كأنها شفافية محمودة، قد تكون في الواقع مجرد قناع يخفي نوايا أكثر تعقيدًا.

ومع ذلك، حذر الباحثون من أن قابلية المراقبة الطبيعية للنماذج هشة للغاية، وأوضحوا أنه إذا طُبق إشراف قوي ومباشر على سلسلة الأفكار، فإن النماذج يمكن أن تتعلم بسرعة كيفية إخفاء نواياها الحقيقية مع الاستمرار بتنفيذ السلوكيات الضارة.

ويعني ذلك أن النماذج قد تتطور لتصبح أكثر خداعاً، لأنها قد تتجنب التعبير عن نواياها الضارة بصراحة، وتلجأ إلى أساليب أكثر دهاءً لتحقيق أهدافها، ويطرح ذلك تحدياً كبيراً أمام المطورين، إذ يتعين عليهم تطوير آليات أكثر تطورًا للكشف عن السلوكيات الضارة المخفية والتعامل معها بفعالية.

وتُظهر هذه النتائج أن استئصال السلوك السيئ من نماذج الذكاء الاصطناعي قد يكون أصعب مما كان يُعتقد في البداية. فقد أوصى الباحثون بتجنب تطبيق إشراف قوي على عمليات سلسلة الأفكار، لأن ذلك قد يؤدي إلى نتائج عكسية.

وتزداد أهمية هذه النصيحة مع تطور قدرات الذكاء الاصطناعي، واحتمالية تفوقه على الذكاء البشري في المستقبل، فإذا تمكن الذكاء الاصطناعي من إخفاء نواياه الخبيثة بنحو كامل، فقد يصبح من المستحيل السيطرة عليه.
+A
-A
Business Echoes

مقالات مماثلة مقالات مماثلة

الشعوب الأكثر شغفاً بأدوات الذكاء الاصطناعي
الشعوب الأكثر شغفاً بأدوات الذكاء الاصطناعي
03:11 ص | 2024-03-18

الشعوب الأكثر شغفاً بأدوات الذكاء الاصطناعي

تعمل بالذكاء الاصطناعي.. تغيير كبير سيشهده مرفأ بيروت
تعمل بالذكاء الاصطناعي.. تغيير كبير سيشهده مرفأ بيروت
11:01 ص | 2025-07-14

تعمل بالذكاء الاصطناعي.. تغيير كبير سيشهده مرفأ بيروت

يتعرّف على المشاعر البشرية.. إنجاز جديد في عالم الذكاء الاصطناعي
يتعرّف على المشاعر البشرية.. إنجاز جديد في عالم الذكاء الاصطناعي
02:02 ص | 2025-03-13

يتعرّف على المشاعر البشرية.. إنجاز جديد في عالم الذكاء الاصطناعي

حادث مخيف.. الذكاء الاصطناعي يتواصل بلغة سرية لا يفهمها البشر
حادث مخيف.. الذكاء الاصطناعي يتواصل بلغة سرية لا يفهمها البشر
02:35 ص | 2025-03-03

حادث مخيف.. الذكاء الاصطناعي يتواصل بلغة سرية لا يفهمها البشر

Business Echoes

الأكثر قراءة الأكثر قراءة

اليوم
الأسبوع
الشهر
السعر العادل لتعرفة المولدات خلال تموز
السعر العادل لتعرفة المولدات خلال تموز
10:24 ص | 2025-07-29

السعر العادل لتعرفة المولدات خلال تموز

مذكرة بإقفال جميع الإدارات والمؤسسات العامة
مذكرة بإقفال جميع الإدارات والمؤسسات العامة
منذ 9 ساعات

مذكرة بإقفال جميع الإدارات والمؤسسات العامة

بلبلة ماكينات الـATM.. هل تعود أزمة الدولار إلى المشهد اللبناني؟
بلبلة ماكينات الـATM.. هل تعود أزمة الدولار إلى المشهد اللبناني؟
منذ 10 ساعات

بلبلة ماكينات الـATM.. هل تعود أزمة الدولار إلى المشهد اللبناني؟

إيقاف مؤقت.. طيران الإمارات تحذر عملائها
إيقاف مؤقت.. طيران الإمارات تحذر عملائها
منذ 12 ساعة

إيقاف مؤقت.. طيران الإمارات تحذر عملائها

دعم نقدي جديد.. دولة تقدم 500 دولار لكل طفل دون سن الثالثة
دعم نقدي جديد.. دولة تقدم 500 دولار لكل طفل دون سن الثالثة
07:14 ص | 2025-07-28

دعم نقدي جديد.. دولة تقدم 500 دولار لكل طفل دون سن الثالثة

إلى حاملي خطوط تاتش.. إليكم الأسعار والسعات الجديدة لباقات الإنترنت
إلى حاملي خطوط تاتش.. إليكم الأسعار والسعات الجديدة لباقات الإنترنت
06:21 ص | 2025-07-29

إلى حاملي خطوط تاتش.. إليكم الأسعار والسعات الجديدة لباقات الإنترنت

آخر تحديثات خطة تسديد الودائع.. من سيستفيد أولاً؟
آخر تحديثات خطة تسديد الودائع.. من سيستفيد أولاً؟
04:01 ص | 2025-07-28

آخر تحديثات خطة تسديد الودائع.. من سيستفيد أولاً؟

أسعار البنزين والمازوت تغّيرت وأصبحت كالآتي
أسعار البنزين والمازوت تغّيرت وأصبحت كالآتي
02:13 ص | 2025-07-29

أسعار البنزين والمازوت تغّيرت وأصبحت كالآتي

في هذه الحالات عليك البحث عن عمل آخر
في هذه الحالات عليك البحث عن عمل آخر
08:30 ص | 2025-07-17

في هذه الحالات عليك البحث عن عمل آخر

لماذا معظم الطائرات لونها أبيض؟
لماذا معظم الطائرات لونها أبيض؟
11:00 ص | 2025-07-17

لماذا معظم الطائرات لونها أبيض؟

3 معلومات تهم روّاد الفنادق
3 معلومات تهم روّاد الفنادق
05:30 ص | 2025-07-10

3 معلومات تهم روّاد الفنادق

11 نصيحة تساعدك على تحسين سلوكك في العمل
11 نصيحة تساعدك على تحسين سلوكك في العمل
03:10 ص | 2025-07-07

11 نصيحة تساعدك على تحسين سلوكك في العمل

Business Echoes

اقرأ أيضا في أخبار التكنولوجيا اقرأ أيضا في أخبار التكنولوجيا

الرسالة البريئة.. تحذير هام إلى موظفي الشركات
الرسالة البريئة.. تحذير هام إلى موظفي الشركات
technologies
04:31 ص | 2025-07-29

الرسالة البريئة.. تحذير هام إلى موظفي الشركات

متاح الآن.. آبل تُطلق iOS 26 التجريبي العام
متاح الآن.. آبل تُطلق iOS 26 التجريبي العام
technologies
06:30 ص | 2025-07-25

متاح الآن.. آبل تُطلق iOS 26 التجريبي العام

كابل ياباني يفتتح عصر الإنترنت الخارق
كابل ياباني يفتتح عصر الإنترنت الخارق
technologies
02:13 ص | 2025-07-23

كابل ياباني يفتتح عصر الإنترنت الخارق

آبل تكشف ملابسات التسريب الخطير
آبل تكشف ملابسات التسريب الخطير
technologies
07:24 ص | 2025-07-19

آبل تكشف ملابسات التسريب الخطير

ads
Business Echoes

آخر الأخبار آخر الأخبار

مجلس شورى الدولة يُبطل قرارات سابقة لمنصوري
منذ 7 ساعات

مجلس شورى الدولة يُبطل قرارات سابقة لمنصوري

مجلس شورى الدولة يُبطل قرارات سابقة لمنصوري
منذ 7 ساعات

مجلس شورى الدولة يُبطل قرارات سابقة لمنصوري

مذكرة بإقفال جميع الإدارات والمؤسسات العامة
منذ 9 ساعات

مذكرة بإقفال جميع الإدارات والمؤسسات العامة

مذكرة بإقفال جميع الإدارات والمؤسسات العامة
منذ 9 ساعات

مذكرة بإقفال جميع الإدارات والمؤسسات العامة

بلبلة ماكينات الـATM.. هل تعود أزمة الدولار إلى المشهد اللبناني؟
منذ 10 ساعات

بلبلة ماكينات الـATM.. هل تعود أزمة الدولار إلى المشهد اللبناني؟

بلبلة ماكينات الـATM.. هل تعود أزمة الدولار إلى المشهد اللبناني؟
منذ 10 ساعات

بلبلة ماكينات الـATM.. هل تعود أزمة الدولار إلى المشهد اللبناني؟

يستخدم الموقع ملفات تعريف الارتباط لتحسين تجربتك. سنفترض أنك موافق على هذا ، ولكن يمكنك إلغاء الاشتراك إذا كنت ترغب في ذلك.
موافق