MoE

LLM نموذج لغة ضخم بتعلم على مليارات الكلمات وبعدين بيقدر يتنبأ ويكتب نصوص زي ChatGPT و Claude. أوراق نفس اليوم transformer هو البنية الأساسية اللي قايم عليها الذكاء الاصطناعي الحديث كله، بيشتغل على مبدأ الانتباه يعني… أوراق نفس اليوم SLM اختصار لـ Statistical Language Model، يعني نموذج إحصائي بيتعلم من النصوص عشان يتوقع الكلمات… أوراق نفس اليوم SAM Segment Anything Model — نموذج يحدد أقسام أي جسم بالصورة بناءً على prompt نفس المقالة LAM Large Action Model — نموذج يدمج الإدراك والنية والتخطيط لتنفيذ أفعال نفس المقالة router router هو آلية بتقرر أي فرع من النموذج يستخدم لكل سؤال، بتوزّع الشغل عشان يكون أسرع. نفس المقالة embedding الـ embedding هو تمثيل الكلمات أو العناصر بأرقام بفضاء منخفض، الإشي هاد بيعطي معنى قريب… نفس المقالة low-resource languages لغات ما إلها نصوص رقمية كافية لتدريب النماذج نفس المقالة FLORES-200 مقياس بيقيس جودة الترجمة بنفس الجمل عبر ٢٠٠ لغة نفس المقالة distillation تقنية بنأخذ فيها نموذج ذكاء اصطناعي كبير وقوي ونعلّم نموذج أصغر يحاكيه، عشان نحصل على أداء شبه… نفس المقالة NLLB-200 نموذج ترجمة مفتوح من Meta بيغطي ٢٠٠ لغة — اختصار No Language Left Behind نفس المقالة MLM MLM هو اختصار لـMasked Language Modeling، بنستخدمه لتدريب النماذج على توقع الكلمات المخبّية… نفس المقالة VLMs هاي نماذج بتفهم الصور والنصوص مع بعض يعني بتقدر تحكيلها 'شو في بالصورة هاي؟ نفس المقالة LCM Large Concept Model — نموذج يركز على فهم المفهوم الكامل للجملة نفس المقالة fine-tuning تدريب إضافي لنموذج موجود بالفعل على بيانات جديدة وخاصة عشان يكون أفضل في مجال معين. أوراق نفس اليوم benchmark يعني مجموعة معايير واختبارات بنستخدمها عشان نشيك كيف أداء النموذج تبعنا، شو مستواه الفعلي. أوراق نفس اليوم On-Policy Distillation هالطريقة بنقل فيها المعرفة من نموذج بيتعلم على نفس السياسة (on‑policy) إلى نموذج أصغر أو أبسط… أوراق نفس اليوم latent state latent state هو تمثيل مخفي للبيانات داخل النموذج، يعني معلومات ما بنشوفها مباشرة لكن النموذج… أوراق نفس اليوم instruction-following instruction-following هو قدرة النموذج يتبع التعليمات اللي بنعطيه ياها، يعني يشتغل حسب المطلوب… أوراق نفس اليوم SFT اختصار Supervised Fine-Tuning، يعني بناخد نموذج ذكاء اصطناعي جاهز ونعلّمه من جديد على بيانات… أوراق نفس اليوم global state global state هو الحالة العامة للبيئة أو النظام كله، بنستعمله لنفهم كيف كل المكوّنات بتتفاعل مع… أوراق نفس اليوم xHC إكس إتش سي هو موديل بيستخدم هيك روابط هايبر-كونكشنز لتوليد مخرجات أسرع وأدق، بنستفيد منه عشان… أوراق نفس اليوم autoregressive يعني النموذج بيتنبأ بالكلمة الجاية بناءً على الكلمات اللي جاية قبلها، خطوة بخطوة. أوراق نفس اليوم pre-training هي العملية الأولى اللي بنعلم فيها النموذج على كمية ضخمة من الكلام من الإنترنت عشان يتعلم يفهم… أوراق نفس اليوم Memory Hub الميموري هاب هو مخزن بنحط فيه المعلومات اللي النموذج احتاج يفتكرها بسرعة، بنستعمله عشان… أوراق نفس اليوم video world models video world models هي نماذج بتتعلم من فيديوهات لتفهم العالم المتحرك، يعني بتقدر تتوقع الحركة… أوراق نفس اليوم Latent Intent Reasoning لاتنت إنتنت ريزننغ هو طريقة بنستنتج فيها النوايا المخفية ورا الكلام أو الفعل، مش واضح على… أوراق نفس اليوم self-distillation تقنية بنعلم فيها نموذج كبير يدرّس نسخة أصغر من نفسه، عشان نحسّن الأداء مش بنحتاج بيانات جديدة أوراق نفس اليوم Hyper-Connections هايبر-كونكشنز يعني روابط قوية ومتشابكة بين مكونات النموذج أو البيانات، بدنا هيك روابط عشان… أوراق نفس اليوم reinforcement learning تعليم الذكاء الاصطناعي من خلال نظام الحوافز والعقوبات، زي لما تعلّم طفل بالمكافأة والعقاب عشان… أوراق نفس اليوم