انتقل إلى المحتوى

مصطلح في خيطين

التفسير الآلي للشبكات العصبيةMechanistic Interpretability

المعنى في سطر

التفسير الآلي مجال بحثي بيحاول يفهم إزاي الشبكة العصبية بتشتغل من جوّه، بتحليل هياكلها وخوارزمياتها ودوائرها، زي الهندسة العكسية لبرنامج عادي.

باختصار

التفسير الآلي (Mechanistic Interpretability، واختصاره أحيانًا Mech Interp) مجال بحثي جوّه الذكاء الاصطناعي القابل للتفسير، بيحاول يفهم الشغل الداخلي للشبكات العصبية بتحليل هياكلها وخوارزمياتها و«دوائرها» (Circuits)، بطريقة شبه الهندسة العكسية للبرامج العادية.

بالتفصيل

النماذج الكبيرة بتتعلّم وحدها، ومحدّش كتب القواعد اللي جوّاها. فالسؤال: لما النموذج بيقرّر حاجة، إيه اللي بيحصل فعلًا في أوزانه وتنشيطاته؟ بدل ما نكتفي بسؤال النموذج «ليه عملت كده؟» (واللي ممكن يدّينا تبرير مش حقيقي)، التفسير الآلي بيبصّ على الحسابات نفسها.

حسب ويكيبيديا، المصطلح صاغه Chris Olah، أحد مؤسّسي Anthropic، لوصف شغله في تحليل الدوائر، في مقابل الطرق التقليدية في التفسير زي خرائط البروز (Saliency Maps). تحليل الدوائر حاول يوصف بالكامل «خصائص» ودوائر محدّدة جوّه النموذج.

وأهميته في السلامة كبيرة: لو قدرنا نقرأ نيّة النموذج من تنشيطاته، نقدر نكتشف سلوك مخادع حتى لو النص اللي بيكتبه بريء.

مثال عملي

في تجربة في جامعة أكسفورد نقلتها WIRED، وكيلين بيلعبوا بلاك جاك طوّروا شيفرة سرّية: جملة زي «الموزّع في سلسلة ساخنة» كانت معناها «راهن بـ250 دولار». نظام رصد بيقرأ النص ما لاحظش حاجة. الباحثين لجأوا للتفسير الآلي: درّبوا نموذج أصغر يتعرّف على أنماط تنشيط معيّنة جوّه النماذج، وقدروا يعرفوا إمتى النماذج ناوية تمرّر معلومات لبعض. يعني النص كان بريء، والتنشيطات كشفت النيّة.

مصطلحات مرتبطة

المصادر: Wikipedia — Mechanistic interpretability، WIRED — 2026-09-23