Diffusion Transformer (DiT)

fine-tuning تدريب إضافي لنموذج موجود بالفعل على بيانات جديدة وخاصة عشان يكون أفضل في مجال معين. أوراق نفس اليوم KV cache تقنية بتخزّن المفاتيح والقيم اللي حسبناها قبل هيك عشان نستخدمها مرة ثانية. أوراق نفس اليوم reinforcement learning تعليم الذكاء الاصطناعي من خلال نظام الحوافز والعقوبات، زي لما تعلّم طفل بالمكافأة والعقاب عشان… أوراق نفس اليوم latent space فضاء مخفي داخل النموذج بحط فيه المعلومات المهمة بشكل مضغوط وبسيط، بدل ما يشتغل على البيانات… أوراق نفس اليوم softmax attention هاد إشي رياضي بيحسب قد شو كل كلمة في الجملة مهمة بالنسبة للكلمات الثانية، وبنسمع عنه لأنه… أوراق نفس اليوم autoregressive model هو نموذج بيتعلم يولّد الإشي خطوة خطوة، كل خطوة بتعتمد على اللي قبلها، زي ما بنحكي كلمة كلمة. أوراق نفس اليوم latent latent هو الفضاء المخفي أو المتغيّر اللي بيمثل الخصائص الأساسية للبيانات بعد ما النموذج… أوراق نفس اليوم semantic action units semantic action units هي وحدات صغيرة من الفعل بتوصف معنى الحركة، بنستعملها عشان نحلّل سلوك… أوراق نفس اليوم VLMs هاي نماذج بتفهم الصور والنصوص مع بعض يعني بتقدر تحكيلها 'شو في بالصورة هاي؟ أوراق نفس اليوم ROPD مش قادرة أتأكد من هاد المصطلح بشكل دقيق، يمكن يكون اختصار لطريقة خاصة في معالجة البيانات أو… أوراق نفس اليوم vLLM هو مكتبة بتشتغل على تسريع النماذج اللغوية الكبيرة وتخليها تجاوب أسرع كتير. أوراق نفس اليوم knowledge distillation عملية بتاخد معلومات نموذج ذكي كبير وتحطها في نموذج أصغر بدون ما تفقد الكتير من الجودة، أشبه… أوراق نفس اليوم RMSNorm RMSNorm هو نوع من تقنيات التطبيع اللي بتستعمل الجذر التربيعي لمتوسط القيم لتثبيت الأوزان داخل… أوراق نفس اليوم visually grounded thinking يعني لما النموذج بيفكر بمسألة وبيستند على إشي بشوفه بالصورة مش بس على الكلام، وبنسمع عنه لأنه… أوراق نفس اليوم KITTI هادا يا جماعة dataset كبير ومشهور كتير، فيه صور وفيديوهات لسيارات ومُشاة وهيك، عشان ندرب… أوراق نفس اليوم token compression يعني بنضغط ونقلل عدد القطع اللي النموذج لازم يشتغل عليها عشان يوفر وقت وذاكرة، وبنسمع عنه لأن… أوراق نفس اليوم autoregressive pretraining هو طريقة تدريب النماذج اللغوية إنه يتعلموا يكتبوا النص كلمة بكلمة بناءً على اللي قبله، بنسميه… أوراق نفس اليوم generative backbone الـ generative backbone هو العمود الفقري للنموذج اللي بيولّد محتوى جديد (نص، صورة، فيديو) من… أوراق نفس اليوم PCA تحليل المكوّنات الرئيسية بيساعدنا نقلل أبعاد البيانات ونشوف أهم المتغيّرات، بنستعمله لتبسيط… أوراق نفس اليوم throughput throughput هو مقياس السرعة، بيقيس كم توكن/ثانية الموديل يقدر يعالج، بدنا نعرفه عشان نضمن إنه… أوراق نفس اليوم autoencoder autoencoder هو نموذج بيتعلم يضغط البيانات (encode) وبعدين يطلعها تاني (decode)؛ أوراق نفس اليوم Gated DeltaNet (GDN) هاد نوع من نماذج الذكاء الاصطناعي بيستخدم آلية 'بوابات' عشان يتحكم بشو المعلومات يحتفظ فيها… أوراق نفس اليوم LLM نموذج لغة ضخم بتعلم على مليارات الكلمات وبعدين بيقدر يتنبأ ويكتب نصوص زي ChatGPT و Claude. أوراق نفس اليوم streaming inference يعني النموذج بيطلع النتيجة شوي شوي وأنت لسّا بتحكيله، مش بينتظر تخلص ويطلع الجواب دفعة وحدة… أوراق نفس اليوم chain-of-thought chain-of-thought يعني بنطلب من الموديل يفكر بصوت عالي ويحكيلنا خطواته قبل ما يعطي الجواب، وهاد… أوراق نفس اليوم FPS هو مقياس بيقيسلنا كم فريم أو صورة بيعالجها النموذج في الثانية الوحدة. أوراق نفس اليوم latent token latent token هو تمثيل مخفي لكلمة أو جزء من البيانات داخل نموذج كبير، بيحمل معلومات مش واضحة… أوراق نفس اليوم STEPQuant STEPQuant هو نموذج بنستعمله عشان نقّلّل حجم الأوزان للـ neural network، يعني بنحوّل الدقة من… أوراق نفس اليوم benchmark يعني مجموعة معايير واختبارات بنستخدمها عشان نشيك كيف أداء النموذج تبعنا، شو مستواه الفعلي. أوراق نفس اليوم