Reward Function
دالة المكافأة
التعريف
دالة تحدد الإشارة العددية التي تتلقاها الوكيل بعد كل فعل وتعبّر عن هدف المهمة.
تصميمها حاسم: مكافأة ناقصة أو مضللة تجعل الوكيل يجد ثغرات غير مقصودة (Reward Hacking). قد تكون المكافأة متفرقة (عند الهدف فقط) أو كثيفة موجِّهة.
Definition
A reward function specifies the scalar feedback an agent receives and encodes the task objective; poor design leads to unintended reward hacking.
شرح مبسّط للمبتدئين
كنظام نقاط في لعبة: يحدد ما يسعى إليه اللاعب، وقد يُستغل بحيل غير مقصودة.
شرح أكاديمي متخصص
يعظّم الوكيل العائد المخصوم \(G=\sum_t\gamma^t r_t\).
أمثلة عملية
- +1 عند الوصول للهدف و−0.01 لكل خطوة.
التطبيقات والاستخدامات
- تصميم مهام التعلم المعزَّز.
المزايا
- تحدد الهدف بدقة.
القيود والعيوب
- صياغتها صعبة وعرضة للتلاعب.
