L2 · الانتباه
ممنوع النظر إلى الأمام
تطبّق قناعًا سببيًا وتقول لماذا يصبح التدريب بلا فائدة بدونه.
يتدرّب النموذج اللغوي على مهمة واحدة: أن يخمّن الرمز التالي مما سبقه. لكن الجملة كلها تكون في الذاكرة أثناء التدريب، والانتباه يصل إلى كل موضع. فيستطيع الرمز الثالث أن يقرأ الرابع ببساطة، وهو الجواب. فيتعلّم النسخ، لا التنبؤ.