تدريب مقسّم BPE على نص عربي
بناء مقسّم كلمات فرعية من نصوصك الخاصة.
الهدف: تحميل نموذج مدرب وتصنيف جمل بسطرين.
from transformers import pipeline
clf = pipeline("sentiment-analysis", model="distilbert/distilbert-base-uncased-finetuned-sst-2-english")
print(clf(["I love this library!", "The documentation is confusing."]))
pipeline يجمع المقسّم والنموذج والمعالجة اللاحقة. يحتاج الكود اتصالاً بالإنترنت لتنزيل النموذج من Hugging Face Hub أول مرة. لم نستطع تنفيذه في بيئة الاختبار لعدم توفر الاتصال بالمستودع، لذلك لا نعرض مخرجاً.
لم يُنفّذ هذا المثال في بيئة الاختبار: يحتاج تنزيل نموذج من Hugging Face Hub (غير متاح في بيئة الاختبار) راجعه على وثائق المكتبة قبل الاعتماد عليه.
بناء مقسّم كلمات فرعية من نصوصك الخاصة.
فهم بنية النموذج اللغوي في Transformers وتمرير مدخلات وحساب الخسارة.
حساب أكثر الكلمات والثنائيات تكراراً في نص.
الأقسام
لا يوجد قسم بهذا الاسم. اضغط «بحث» للبحث في محتوى الموقع كله.
المفضلة
نتائجي وشهاداتي
تقدّمي في الأكاديميةنتائج اختباراتيتقدّم الأطفالشهادات الأكاديميةشهادات الاختباراتابدأ أي درس أو اختبار وسيظهر هنا لتعود إليه بسرعة.
الإعدادات
أنا المساعد الذكي لأطر ومكتبات الذكاء الاصطناعي. صف مشروعك أو اسألني عن مكتبة أو مقارنة أو مثال برمجي، وسأجيبك من قاعدة بيانات الموسوعة مع الروابط والمصادر.
يجيب من قاعدة بيانات الموسوعة فقط، دون نموذج لغوي ودون إرسال سؤالك إلى أي جهة خارجية.
قد يخطئ المساعد أحياناً، فراجع المصادر المرفقة.