Rich Sutton ha appena pubblicato il suo saggio più importante sull'IA dai tempi di The Bitter Lesson: "Benvenuti nell'era dell'esperienza" Sutton e il suo consigliere Silver sostengono che "l'era dei dati umani", dominata dal pre-addestramento supervisionato e dal feedback umano RL, ha avuto rendimenti decrescenti; il futuro apparterrà ad agenti che — agire in modo continuo in mondi reali o simulati, — generare ed etichettare i propri dati di addestramento attraverso l'interazione — ottimizzare le ricompense basate sull'ambiente piuttosto che sulle sole preferenze umane, e – affinare i loro modelli e piani del mondo nel corso di flussi di esperienza che durano tutta la vita.