Imitation Learning

التعلم بالمحاكاة

التعريف

تعلم سياسة بتقليد سلوك خبير من عروض مسجلة بدل التعلم من مكافأة.

أبسط صوره الاستنساخ السلوكي (تعلم موجّه من أزواج حالة–فعل)، لكنه يعاني من تراكم الأخطاء. تعالجه طرق مثل DAgger والتعلم المعزَّز العكسي الذي يستنتج المكافأة من السلوك.

Definition

Imitation learning trains a policy to reproduce expert behaviour from demonstrations rather than from reward, via behavioural cloning or inverse reinforcement learning.

شرح مبسّط للمبتدئين

كمتدرب يراقب خبيراً ثم يقلّد حركاته.

شرح أكاديمي متخصص

المشكلة الأساسية انزياح التوزيع: ينتهي النموذج في حالات لم يرها الخبير.

أمثلة عملية

  • تعليم روبوت بتحريك ذراعه يدوياً.

التطبيقات والاستخدامات

  • الروبوتات والقيادة.

المزايا

  • لا يحتاج مكافأة.

القيود والعيوب

  • محدود بجودة العروض.

تعلّم وراجع

مصطلحات مقترحة للتعلّم بعده