انتقل إلى المحتوى

مصطلح في خيطين

الاستجابة الذهبيةGolden Response

المعنى في سطر

الإجابة المعروف أنها جيّدة، واللي بتتقارن بيها مخرجات النموذج — حجر الأساس في أي تقييم آلي.

باختصار

الاستجابة الذهبية (Golden Response) هي استجابة معروف أنها جيّدة، تُستخدم كمرجع تُقارن به مخرجات النموذج.

بالتفصيل

المثال الأبسط: لو كان الموجّه هو «2 + 2»، فالاستجابة الذهبية — كما نأمل — هي «4».

وبعض المؤسّسات بتعرّف مصطلحات إضافية للتدرّج في الجودة، زي الاستجابة الفضّية (Silver Response) للاستجابات الأقلّ جودة، والاستجابة البلاتينية (Platinum Response) للأعلى جودة. فقد تستخدم مؤسّسة «الاستجابة البلاتينية» للإشارة إلى استجابة ذهبية ولّدها خبير ثم راجعها خبراء آخرون.

وفيه علاقة وثيقة بين الاستجابة الذهبية والنصّ المرجعي (Reference Text). بعض مقاييس التقييم، زي ROUGE، بتقارن النصّ المرجعي بالنصّ المولّد من النموذج. ولما يكون للموجّه إجابة صحيحة واحدة، بتقوم الاستجابة الذهبية عادةً بدور النصّ المرجعي.

لكن بعض الموجّهات ليس لها إجابة صحيحة واحدة. فموجّه مثل «لخّص هذا المستند» له على الأرجح إجابات صحيحة كثيرة — وهنا تتعقّد فكرة «الاستجابة الذهبية» نفسها، لأن أي ملخّص جيّد قد يختلف كليًا في الصياغة عن المرجع.

والخلاصة العملية: الاستجابة الذهبية أداة قوية في المهامّ محدّدة الإجابة، وأداة قاصرة في المهامّ المفتوحة.

مثال عملي

بتبني مساعدًا يستخرج بيانات من فواتير. لكل فاتورة اختبار، بتحدّد الاستجابة الذهبية يدويًا: رقم الفاتورة، والتاريخ، والإجمالي.

هنا المقارنة الآلية دقيقة ومباشرة — الإجابة إمّا مطابقة أو لا. لكن لو طلبت من نفس المساعد «اكتب رسالة متابعة مهذّبة للمورّد»، فمفيش استجابة ذهبية واحدة، ولازم تنتقل لمقيّم آلي أو لتقييم بشري.

مصطلحات مرتبطة

المصادر: Google ML Glossary