الموضوعات الرئيسية لمعرفة كيفية عمل ماجستير العلوم في القانون ، كل ما يتطلبه الأمر هو < عامين إذا كان لديك CS Foundation > الترميز والتضمينات > التضمينات الموضعية (مطلق ، حبل ، عذر) > الاهتمام الذاتي والاهتمام متعدد الرؤوس محولات > > qkv > معلمات أخذ العينات: درجة الحرارة ، أعلى K أعلى p ذاكرة التخزين المؤقت > كيلو فولت (ولماذا يكون الاستدلال سريعا) > الانتباه اللامتناهي والنافذة المنزلقة (حيل السياق الطويل) مزيج > من الخبراء (طبقات توجيه وزارة النقل) > انتباه الاستعلام المجمع > التطبيع والتنشيط > أهداف ما قبل التدريب (سببية ، مقنعة ، إلخ) > الضبط الدقيق مقابل ضبط التعليمات مقابل RLHF قوانين القياس > ومنحنيات سعة النموذج مواضيع المكافأة: > التكميم - qat مقابل ptq (GGUFS ، AWQ ، إلخ) التدريب > مقابل أكوام الاستدلال (DeepSpeed ، vllm ، إلخ) > إنشاء البيانات التركيبية