باختصار
تحدّي مخطّط Winograd (Winograd Schema Challenge أو WSC) يسأل النموذج سؤالًا يبدو تافهًا: على من يعود هذا الضمير؟
بالتفصيل
بحسب مسرد Google، يتكوّن كل عنصر في التحدّي من:
- فقرة قصيرة فيها ضمير مستهدف.
- الضمير نفسه.
- عبارات اسمية مرشّحة، ولكلّ منها إجابة: صح إذا عاد الضمير عليها، وخطأ إذا لم يعد.
والتحدّي جزء من مجموعة SuperGLUE.
لماذا هو صعب إذن؟ لأن النحو لا يحسم الأمر. في الجملة اسمان، والضمير يصلح نحويًا لكليهما. الحَكَم الوحيد هو فهم الموقف، وهذا ما يفعله طفل في السابعة دون تفكير، وتتعثّر فيه آلات تحفظ ملايين الصفحات.
مثال عملي
مثال من المسرد: «روى Mark لـPete أكاذيب كثيرة عن نفسه، فضمّنها Pete في كتابه. كان عليه أن يكون أكثر صدقًا».
- الضمير المستهدف: «عليه».
- Mark: صح، فهو من كذب.
- Pete: خطأ.
جرّب بالعربية: «لم يدخل الكوب في الحقيبة لأنه كبير». الضمير يعود على الكوب. غيّر كلمة واحدة: «لأنها صغيرة»، فيعود على الحقيبة. كلمة واحدة قلبت الإجابة.. وهذا بالضبط ما يختبره التحدّي.
مصطلحات مرتبطة
- SuperGLUE — سوبر جلو.
- Natural Language Understanding — فهم اللغة الطبيعية.
- Benchmark — المعيار القياسي.
- Named Entity Recognition (NER) — التعرّف على الكيانات المسمّاة.
المصادر: Google ML Glossary
