Strategiska ramverk och perspektiv
Den bittra läxan (the bitter lesson)
På engelska: The bitter lesson
Förklaring
Den bittra läxan är en princip formulerad av AI-forskaren Rich Sutton 2019: enkla metoder som drar nytta av mer beräkningskraft slår nästan alltid smarta, handgjorda lösningar i längden. Lärdomen är 'bitter' eftersom forskare gång på gång byggt eleganta system bara för att se dem köras över av brute force-modeller med mer data och fler GPU:er. Det är en av nyckelförklaringarna till varför stora språkmodeller och dagens AI-industri ser ut som den gör.
Ursprung och källa
Richard Sutton, 2019