كتب الذكاء الاصطناعيمشاريع الذكاء الاصطناعيمقالات الذكاء الاصطناعيمعجم الذكاء الاصطناعياسئلة واجوبة في الذكاء الاصطناعيأكاديمية الذكاء الاصطناعي للأطفالأكاديمية الذكاء الاصطناعيمدرسة رياضيات الذكاء الاصطناعيمختبر الذكاء الاصطناعيمختبر الخوارزميات المستوحاة من الطبيعةأطلس نماذج الذكاء الاصطناعيموسوعة تطبيقات الذكاء الاصطناعيمستكشف مجموعات البيانات للذكاء الاصطناعياختبارات الذكاء الاصطناعيالفايب كودينغدليل البرمجة بالذكاء الاصطناعيمولّد مشاريع الذكاء الاصطناعيمرصد الذكاء الاصطناعيدليل أدوات الذكاء الاصطناعي البحث والنشر الأكاديميمكتبة البرومبتات الأكاديميةمستودع الرسائل والأطاريح في الذكاء الاصطناعيحاسبة الترقية العلميةأكاديمية الوكلاء الذكيينمختبر أخلاقيات الذكاء الاصطناعي والعدالةساحة ألعاب الذكاء الاصطناعيعبقري الذكاء الاصطناعيمختبر التنبؤ بالسلاسل الزمنيةمتحف الذكاء الاصطناعيمختبر الرؤية الحاسوبيةمختبر الشبكات العصبية البيانيةمختبر تحليل الصور الطبيةمختبر معالجة اللغة الطبيعيةمختبر الحوسبة الكمّيةخرائط طريق الذكاء الاصطناعيأكاديمية ماتلاب والذكاء الاصطناعيمصمم الشبكات العصبيةأكاديمية الذكاء الاصطناعي بدون برمجة

معالجة اللغة الطبيعية · NLP

حقيبة الكلمات من الصفر

Bag of Words from Scratch

مبتدئمعالجة اللغة الطبيعية

بناء مفردات ومصفوفة تكرار لمستندات قصيرة.

docs = {'ai helps doctors', 'doctors use ai tools', 'tools for students'};
tok = cellfun(@(d) strsplit(d, ' '), docs, 'UniformOutput', false);
vocab = unique([tok{:}]);
M = zeros(numel(docs), numel(vocab));
for i = 1:numel(docs)
    for j = 1:numel(tok{i})
        k = find(strcmp(vocab, tok{i}{j}));
        M(i, k) = M(i, k) + 1;
    end
end
fprintf('vocab: %s\n', strjoin(vocab, ' '));
for i = 1:size(M, 1), fprintf('doc %d: %s\n', i, mat2str(M(i, :))); end
fprintf('most frequent: %s\n', vocab{find(sum(M) == max(sum(M)), 1)});

شرح الخطوات

  1. strsplit يقطع كل مستند.
  2. unique تبني المفردات مرتبة.
  3. كل صف متجه تكرار لمستند.

المخرجات المتوقعة

مخرجات فعلية من GNU Octave
vocab: ai doctors for helps students tools use
doc 1: [1 1 0 1 0 0 0]
doc 2: [1 1 0 0 0 1 1]
doc 3: [0 0 1 0 1 1 0]
most frequent: ai

شُغّل هذا الكود في GNU Octave 8.4 أثناء إعداد المكتبة والمخرجات المعروضة ناتجه الفعلي. لم يُختبر في MATLAB نفسه، لكنه يستخدم دوال MATLAB الأساسية فقط والطباعة بـ fprintf/disp.