#1
تحرير المعرفة للـ LLMs بطريقة Hybrid-Policy Self-Editing
Hybrid-Policy Self-Editing for Composable Unstructured Knowledge Editing
الفريق بيحكي إنو الـ LLMs عم تتعلم من بيانات ثابتة، فالمعرفة فيها بتصير قديمة بسرعة. هالمرة الباحثين قدموا طريقة جديدة اسمها HPSE، بتخلّي الموديل يعلّم حاله من داخل نفسه عبر "self-distillation" وبيضيف معلومات جديدة بطريقة "hybrid rollout" لتغطي الفجوات. النتيجة إنو الموديل ما بس بيحفظ الفقرة الجديدة، بل بيقدر يجاوب أسئلة بسيطة ويجمع المعلومات لتفكير متعدد الخطوات، يعني بيصير أكتر تركيبة وفاعلية.
ليش بتهمّك؟: هالطريقة بتخلّي النماذج الكبيرة تظل محدثة وتجاوب بدقة على أسئلة جديدة بدون ما نعيد تدريبها من الصفر.