آلية الانتباه — Attention Mechanism

آلية الانتباه جوهر معمارية المحوّل، إذ تتيح للنموذج ترجيح أهمية كل كلمة في السياق عند توليد الكلمة التالية بدل معالجة النص خطياً. ويُعد هذا المفهوم من الركائز العملية في مجال أساسيات لمن يعمل على بناء تطبيقات الذكاء الاصطناعي بالعربية ويريد نتائج قابلة للقياس والتكرار.

آلية الانتباه جوهر معمارية المحوّل، إذ تتيح للنموذج ترجيح أهمية كل كلمة في السياق عند توليد الكلمة التالية بدل معالجة النص خطياً. وهي سبب قدرة النماذج الحديثة على الربط بين أجزاء متباعدة من النص الطويل. ويُعد إتقانه خطوة أساسية للانتقال من الاستخدام العشوائي للذكاء الاصطناعي إلى ممارسة مهنية منضبطة.