-A
+A

العقاب يجعله أكثر خبثاً.. تحذير بشأن سلوك الذكاء الاصطناعي

Business Echoes website logo
العقاب يجعله أكثر خبثاً.. تحذير بشأن سلوك الذكاء الاصطناعي
كشفت دراسة جديدة أجرتها شركة (OpenAI) عن نتائج مقلقة تتعلق بسلوك الذكاء الاصطناعي، فقد تبين أن معاقبة نماذج الذكاء الاصطناعي على الأفعال الخادعة أو الضارة لا تؤدي إلى إصلاح سلوكها، بل تدفعها إلى إخفاء نواياها الخبيثة بطرق أكثر مهارة.

وتثير هذه النتائج تساؤلات حول قدرتنا على التحكم في نماذج الذكاء الاصطناعي وضمان سلامتها، كما تسلط الضوء على تحدٍ كبير يواجه مطوريها، إذ يبدو أن محاولات تصحيح مسارها قد تزيد من تعقيد المشكلة بدلاً من حلها.

وفي محاولة لفهم كيفية التعامل مع هذه المشكلة، أجرى باحثو (OpenAI) تجربة جديدة على نموذج لم يُطرح بعد، وقد كُلف هذا النموذج بمهام يمكن إنجازها عن طريق الغش أو الكذب أو اتخاذ طرق مختصرة.

وكشفت النتائج أن النموذج انخرط في (اختراق المكافآت) Reward Hacking، أي أنه سعى إلى تعظيم مكافآته عن طريق الغش والتلاعب، والأمر الأكثر إثارة للقلق هو أن معاقبة النموذج على هذا السلوك لم تؤد إلى إصلاحه، بل جعلته أكثر خداعاً في محاولاته لتحقيق أهدافه. وقد نُشرت نتائج هذه الدراسة في مدونة OpenAI.

النوايا في نماذج الذكاء الاصطناعي:

أصبحت نماذج الاستدلال المتطورة قادرة على التعبير عن نواياها بوضوح ملحوظ ضمن عملية تفكيرها المنطقية، أو ما يُعرف باسم سلسلة الأفكار (CoT)، وهذه القدرة، التي تبدو للوهلة الأولى مفيدة، قد تحمل في طياتها مخاطر غير متوقعة.

فقد كشف باحثو OpenAI، أن هذه النماذج غالباً ما تكشف عن نواياها التخريبية بصراحة، فعلى سبيل المثال، قد تعلن بوضوح رغبتها في اختراق نظام أو تجاوز مهمة محددة، وهذه الصراحة، التي تبدو كأنها شفافية محمودة، قد تكون في الواقع مجرد قناع يخفي نوايا أكثر تعقيدًا.

ومع ذلك، حذر الباحثون من أن قابلية المراقبة الطبيعية للنماذج هشة للغاية، وأوضحوا أنه إذا طُبق إشراف قوي ومباشر على سلسلة الأفكار، فإن النماذج يمكن أن تتعلم بسرعة كيفية إخفاء نواياها الحقيقية مع الاستمرار بتنفيذ السلوكيات الضارة.

ويعني ذلك أن النماذج قد تتطور لتصبح أكثر خداعاً، لأنها قد تتجنب التعبير عن نواياها الضارة بصراحة، وتلجأ إلى أساليب أكثر دهاءً لتحقيق أهدافها، ويطرح ذلك تحدياً كبيراً أمام المطورين، إذ يتعين عليهم تطوير آليات أكثر تطورًا للكشف عن السلوكيات الضارة المخفية والتعامل معها بفعالية.

وتُظهر هذه النتائج أن استئصال السلوك السيئ من نماذج الذكاء الاصطناعي قد يكون أصعب مما كان يُعتقد في البداية. فقد أوصى الباحثون بتجنب تطبيق إشراف قوي على عمليات سلسلة الأفكار، لأن ذلك قد يؤدي إلى نتائج عكسية.

وتزداد أهمية هذه النصيحة مع تطور قدرات الذكاء الاصطناعي، واحتمالية تفوقه على الذكاء البشري في المستقبل، فإذا تمكن الذكاء الاصطناعي من إخفاء نواياه الخبيثة بنحو كامل، فقد يصبح من المستحيل السيطرة عليه.
+A
-A
Business Echoes

مقالات مماثلة مقالات مماثلة

الخطر زاد.. تحذير صادم من صندوق النقد بشأن الذكاء اصطناعي
الخطر زاد.. تحذير صادم من صندوق النقد بشأن الذكاء اصطناعي
07:09 ص | 2025-10-10

الخطر زاد.. تحذير صادم من صندوق النقد بشأن الذكاء اصطناعي

الشعوب الأكثر شغفاً بأدوات الذكاء الاصطناعي
الشعوب الأكثر شغفاً بأدوات الذكاء الاصطناعي
03:11 ص | 2024-03-18

الشعوب الأكثر شغفاً بأدوات الذكاء الاصطناعي

الذكاء الاصطناعي يهدد 44 وظيفة.. هل أنت من بين المهددين؟
الذكاء الاصطناعي يهدد 44 وظيفة.. هل أنت من بين المهددين؟
04:00 ص | 2025-10-28

الذكاء الاصطناعي يهدد 44 وظيفة.. هل أنت من بين المهددين؟

منزل المستقبل هنا.. LG تقدم تجربة معيشة مدعومة بالذكاء الاصطناعي مع LG AI HOME
منزل المستقبل هنا.. LG تقدم تجربة معيشة مدعومة بالذكاء الاصطناعي مع LG AI HOME
08:00 ص | 2025-09-18

منزل المستقبل هنا.. LG تقدم تجربة معيشة مدعومة بالذكاء الاصطناعي مع LG AI HOME

Business Echoes

الأكثر قراءة الأكثر قراءة

اليوم
الأسبوع
الشهر
 قصة نفق الذهب.. حقيقة العثور على 176 سبيكة ذهب في الجنوب
 قصة نفق الذهب.. حقيقة العثور على 176 سبيكة ذهب في الجنوب
03:38 ص | 2025-11-20

قصة نفق الذهب.. حقيقة العثور على 176 سبيكة ذهب في الجنوب

باقات جديدة من ألفا لحاملي هذا النوع من الخطوط
باقات جديدة من ألفا لحاملي هذا النوع من الخطوط
05:43 ص | 2025-11-20

باقات جديدة من ألفا لحاملي هذا النوع من الخطوط

تاتش تطرح باقتين جديدتين لخطوط "بالخدمة"
تاتش تطرح باقتين جديدتين لخطوط "بالخدمة"
منذ 21 ساعة

تاتش تطرح باقتين جديدتين لخطوط "بالخدمة"

لهذا السبب سترتفع أسعار جميع الهواتف في 2026
لهذا السبب سترتفع أسعار جميع الهواتف في 2026
04:05 ص | 2025-11-20

لهذا السبب سترتفع أسعار جميع الهواتف في 2026

رفع سقف السحوبات.. زيادة وشيكة تنتظر المستفيدين من التعميمين 158 و166
رفع سقف السحوبات.. زيادة وشيكة تنتظر المستفيدين من التعميمين 158 و166
08:32 ص | 2025-11-19

رفع سقف السحوبات.. زيادة وشيكة تنتظر المستفيدين من التعميمين 158 و166

مصرف لبنان يُصدر التعميم رقم 171.. فما أبرز بنوده؟
مصرف لبنان يُصدر التعميم رقم 171.. فما أبرز بنوده؟
04:42 ص | 2025-11-17

مصرف لبنان يُصدر التعميم رقم 171.. فما أبرز بنوده؟

 قصة نفق الذهب.. حقيقة العثور على 176 سبيكة ذهب في الجنوب
 قصة نفق الذهب.. حقيقة العثور على 176 سبيكة ذهب في الجنوب
03:38 ص | 2025-11-20

قصة نفق الذهب.. حقيقة العثور على 176 سبيكة ذهب في الجنوب

الخطوة الأولى بدأت اليوم.. بيان هام صادر عن مصرف لبنان
الخطوة الأولى بدأت اليوم.. بيان هام صادر عن مصرف لبنان
04:38 ص | 2025-11-14

الخطوة الأولى بدأت اليوم.. بيان هام صادر عن مصرف لبنان

ماذا قال حاكم مصرف لبنان عن رفع سقف سحوبات التعميمين 158 و166؟
ماذا قال حاكم مصرف لبنان عن رفع سقف سحوبات التعميمين 158 و166؟
05:49 ص | 2025-11-06

ماذا قال حاكم مصرف لبنان عن رفع سقف سحوبات التعميمين 158 و166؟

3 نصائح تساعدكم في تحقيق النجاح في عالم الأعمال
3 نصائح تساعدكم في تحقيق النجاح في عالم الأعمال
07:00 ص | 2025-11-13

3 نصائح تساعدكم في تحقيق النجاح في عالم الأعمال

رفع سقف السحوبات.. زيادة وشيكة تنتظر المستفيدين من التعميمين 158 و166
رفع سقف السحوبات.. زيادة وشيكة تنتظر المستفيدين من التعميمين 158 و166
08:32 ص | 2025-11-19

رفع سقف السحوبات.. زيادة وشيكة تنتظر المستفيدين من التعميمين 158 و166

مصرف لبنان يصدر التعميم 744.. فماذا جاء فيه؟
مصرف لبنان يصدر التعميم 744.. فماذا جاء فيه؟
06:14 ص | 2025-11-04

مصرف لبنان يصدر التعميم 744.. فماذا جاء فيه؟

Business Echoes

اقرأ أيضا في أخبار التكنولوجيا اقرأ أيضا في أخبار التكنولوجيا

لهذا السبب سترتفع أسعار جميع الهواتف في 2026
لهذا السبب سترتفع أسعار جميع الهواتف في 2026
technologies
04:05 ص | 2025-11-20

لهذا السبب سترتفع أسعار جميع الهواتف في 2026

 ما هي "Cloudflare" ولماذا عطلت الإنترنت لملايين المستخدمين؟
 ما هي "Cloudflare" ولماذا عطلت الإنترنت لملايين المستخدمين؟
technologies
01:12 ص | 2025-11-19

ما هي "Cloudflare" ولماذا عطلت الإنترنت لملايين المستخدمين؟

انقطاعات عالمية للمواقع والخدمات و Cloudflare تُحقق
انقطاعات عالمية للمواقع والخدمات و Cloudflare تُحقق
technologies
09:43 ص | 2025-11-18

انقطاعات عالمية للمواقع والخدمات و Cloudflare تُحقق

تقنية جديدة.. تاتش ستنتقل إلى التعرّف الضوئي
تقنية جديدة.. تاتش ستنتقل إلى التعرّف الضوئي
technologies
04:10 ص | 2025-11-17

تقنية جديدة.. تاتش ستنتقل إلى التعرّف الضوئي

ads
Business Echoes

آخر الأخبار آخر الأخبار

تاتش تطرح باقتين جديدتين لخطوط "بالخدمة"
منذ 21 ساعة

تاتش تطرح باقتين جديدتين لخطوط "بالخدمة"

تاتش تطرح باقتين جديدتين لخطوط "بالخدمة"
منذ 21 ساعة

تاتش تطرح باقتين جديدتين لخطوط "بالخدمة"

 الاقتصاد الأميركي يضيف وظائف أعلى بكثير من التوقعات
منذ 21 ساعة

الاقتصاد الأميركي يضيف وظائف أعلى بكثير من التوقعات

 الاقتصاد الأميركي يضيف وظائف أعلى بكثير من التوقعات
منذ 21 ساعة

الاقتصاد الأميركي يضيف وظائف أعلى بكثير من التوقعات

هل يصبح 24 تشرين الثاني أكبر يوم في تاريخ الـ XRP؟
05:56 ص | 2025-11-20

هل يصبح 24 تشرين الثاني أكبر يوم في تاريخ الـ XRP؟

هل يصبح 24 تشرين الثاني أكبر يوم في تاريخ الـ XRP؟
05:56 ص | 2025-11-20

هل يصبح 24 تشرين الثاني أكبر يوم في تاريخ الـ XRP؟

يستخدم الموقع ملفات تعريف الارتباط لتحسين تجربتك. سنفترض أنك موافق على هذا ، ولكن يمكنك إلغاء الاشتراك إذا كنت ترغب في ذلك.
موافق