Rich Sutton acaba de publicar seu ensaio mais importante sobre IA desde A Lição Amarga: "Bem-vindo à Era da Experiência" Sutton e seu assessor Silver argumentam que a "era dos dados humanos", dominada pelo pré-treinamento supervisionado e RL-from-human-feedback, atingiu retornos cada vez menores; o futuro pertencerá aos agentes que — atuar continuamente no mundo real ou simulado, — gerar e rotular seus próprios dados de treinamento por meio de interação — otimizar as recompensas baseadas no ambiente e não apenas nas preferências humanas, e — aperfeiçoar os seus modelos e planos mundiais ao longo da vida.