التدريبالمواءمة تحديث 2026

DPO (التحسين المباشر للتفضيلات)

التعريف

أسلوب مواءمة يُدرِّب النموذج مباشرةً على أزواج التفضيلات البشرية بدالة خسارة تصنيفية بسيطة، متجاوزًا نموذج المكافأة المنفصل المستخدم في RLHF.

بيّن Rafailov وزملاؤه (2023) أنه يمكن إعادة صياغة هدف RLHF بحيث يكون النموذج اللغوي، في الواقع، نموذج المكافأة الخاص به. ثم يُدرِّب التحسين المباشر للتفضيلات النموذجَ على أزواج من الردود المفضَّلة مقابل المرفوضة بدالة خسارة بسيطة على نمط التصنيف — محقّقًا مواءمة مماثلة لـ RLHF من دون تعقيد نمذجة المكافأة المنفصلة والتعلّم المعزّز وعدم استقرارهما.

أصبح DPO بديلًا شائعًا وأخفّ وزنًا لمسارات RLHF الكاملة.

المراجع

مصادر أولية ومحكّمة وأرشيفية لهذا التعريف.

Direct Preference Optimization: Your Language Model is Secretly a Reward Model
Rafailov, R., Sharma, A., Mitchell, E., Ermon, S., Manning, C. D., & Finn, C. (2023). Advances in Neural Information Processing Systems 36 (NeurIPS 2023).

مداخل القواميس والموسوعات

استشهد بهذا المدخل

MultipleChat. «DPO (التحسين المباشر للتفضيلات)». مسرد MultipleChat للذكاء الاصطناعي والنماذج اللغوية الكبيرة، 2026. https://multiple.chat/ai-glossary/dpo

مصطلحات ذات صلة

شاهد ذلك عمليًا

شغّل المطالبة نفسها على ChatGPT وClaude وGemini وGrok وPerplexity جنبًا إلى جنب — مع استخدام ملفاتك سياقًا وإجابات يمكنك مقارنتها والتحقق منها.

جرّب MultipleChat مجانًا

تابع التعلّم

اطّلع على الخطط المدفوعة