النماذج اللغوية الكبيرة LLMs

63 مصطلحاً في هذا التصنيف

63 مصطلحاً · صفحة 2 من 3

Knowledge Distillation تقطير المعرفة تدريب نموذج صغير (طالب) على تقليد مخرجات نموذج كبير (معلم) لنقل معرفته بحجم أصغر. متقدم

KV Cache ذاكرة المفاتيح والقيم تخزين مفاتيح وقيم الانتباه للرموز السابقة لتجنب إعادة حسابها عند توليد كل رمز جديد. متقدم

Language Model LM النموذج اللغوي نموذج يقدّر احتمال تسلسل كلمات أو يتنبأ بالكلمة التالية بدلالة ما سبقها. متوسط

Large Language Model LLM نموذج لغة كبير نموذج لغوي ضخم مبني غالباً على المحوّل، دُرّب على كميات هائلة من النصوص للتنبؤ بالرمز التالي، فاكتسب قدرات على الفهم والتوليد والاستدلال. متوسط

Layer Normalization LN تطبيع الطبقة تطبيع يحسب المتوسط والتباين على خصائص المثال الواحد، لا على الدفعة، فيناسب التسلسلات. متقدم

Masked Language Model MLM النموذج اللغوي المقنَّع هدف تدريب يُخفى فيه جزء من الرموز ويُدرَّب النموذج على التنبؤ بها من السياق في الاتجاهين. متقدم

Mixture of Experts MoE خليط الخبراء بنية تضم شبكات «خبراء» عدة وموجّهاً يختار لكل مدخل عدداً قليلاً منها فقط. متقدم

Multi-Agent System MAS نظام متعدد الوكلاء نظام يضم عدة وكلاء أذكياء يتفاعلون بالتعاون أو التنافس لتحقيق أهدافهم. متقدم

Multi-Head Attention MHA الانتباه متعدد الرؤوس تشغيل عدة آليات انتباه بالتوازي بإسقاطات مختلفة ثم دمج نتائجها. متقدم

Multimodal Model النموذج متعدد الوسائط نموذج يعالج أكثر من نوع بيانات معاً، كالنص والصورة والصوت والفيديو. متقدم

Natural Language Processing NLP معالجة اللغة الطبيعية مجال يمكّن الحواسيب من فهم اللغة البشرية المكتوبة والمنطوقة وتحليلها وتوليدها. مبتدئ

Parameter-Efficient Fine-Tuning PEFT الضبط الدقيق الفعال في المعاملات مجموعة طرق تضبط جزءاً صغيراً من معاملات النموذج أو تضيف وحدات صغيرة بدل تحديث كل الأوزان. متقدم

Perplexity PPL الحيرة مقياس لجودة نموذج لغوي: الأسّ لمتوسط الإنتروبيا التقاطعية، وكلما قلّ كان النموذج أقل «حيرة» بالنص. متقدم

Positional Encoding الترميز الموضعي إضافة معلومات ترتيب الرموز إلى تضميناتها لأن الانتباه الذاتي لا يميز المواضع بنفسه. متقدم

Pre-training التدريب المسبق تدريب نموذج على بيانات واسعة وعامة قبل تكييفه لمهمة محددة. متوسط

Prompt Engineering هندسة الأوامر (البرومبت) صياغة المدخلات النصية (الأوامر) الموجّهة إلى النماذج اللغوية بطريقة منهجية للحصول على مخرجات أدق وأكثر فائدة. مبتدئ

Prompt Injection حقن المطالبة هجوم يضع فيه المهاجم تعليمات خبيثة داخل مدخلات يقرؤها النموذج فتتجاوز تعليمات المطوّر. متقدم

Proximal Policy Optimization PPO الأمثلة التقريبية للسياسة خوارزمية تدرج سياسة تحدّ من حجم تغيّر السياسة في كل تحديث بقص نسبة الاحتمالات لتثبيت التدريب. متقدم

Quantization التكميم تقليل دقة أرقام الأوزان والتنشيطات (مثل من 32 بت إلى 8 أو 4 بت) لتصغير النموذج وتسريعه. متقدم

Question Answering QA الإجابة عن الأسئلة مهمة يجيب فيها النظام عن سؤال بلغة طبيعية استناداً إلى نص أو معرفة. متوسط

Reinforcement Learning from Human Feedback RLHF التعلم المعزَّز من التغذية الراجعة البشرية أسلوب يدرَّب فيه نموذج لغوي على تفضيلات بشرية عبر نموذج مكافأة وتعلم معزَّز لجعل مخرجاته أنفع وأكثر أماناً. متقدم

Reranking إعادة الترتيب مرحلة ثانية تعيد ترتيب نتائج استرجاع أولية بنموذج أدق يقيّم الاستعلام مع كل وثيقة معاً. متقدم

Retrieval-Augmented Generation RAG التوليد المعزَّز بالاسترجاع أسلوب يسترجع فيه النظام مقاطع ذات صلة من مصدر معرفة خارجي ويضيفها إلى مطالبة النموذج اللغوي ليجيب بناءً عليها. متقدم

Reward Model نموذج المكافأة نموذج يُدرَّب على تفضيلات بشرية ليعطي درجة تعكس جودة الاستجابة، ويُستخدم لتوجيه التعلم المعزَّز. متقدم