👁️ أين ينظر الذكاء الاصطناعي: آلية الانتباه
لفهم عبارة ما، "ينظر" الذكاء الاصطناعي إلى الكلمات ذات الصلة - وهذه آلية انتباه. انقر على الكلمة المميزة واعرف الكلمات التي ينتبه إليها النموذج للحصول على المعنى. أمثلة باللغة الإنجليزية - يكون الأمر أكثر وضوحًا مع الضمير "it".
👆 انقر على كلمة "it" وسترى ما تشير إليه
Thetrophydidn'tfitinthesuitcasebecausewastoobig.
💡 هذا هو "الانتباه".
آلية الانتباه هي قلب المحول (الحرف T في GPT). بالنسبة لكل كلمة، يقرر النموذج الكلمات الأخرى التي يجب "النظر إليها" لفهم المعنى. هذه هي الطريقة التي يفهم بها الذكاء الاصطناعي أن كلمة "إنها" هي "كأس" وليست "حقيبة سفر". الآلاف من هذه الروابط في نفس الوقت - وستتمكن من فهم اللغة.