Rich Sutton acaba de publicar seu ensaio mais importante sobre IA desde The Bitter Lesson: "Bem-vindo à Era da Experiência" Sutton e seu orientador Silver argumentam que a "era dos dados humanos", dominada pelo pré-treinamento supervisionado e RL do feedback humano, atingiu retornos decrescentes; futuro pertencerá a agentes que — actuar continuamente em mundos reais ou simulados, — gerar e rotular seus próprios dados de treinamento por meio da interação — optimizar as recompensas baseadas no ambiente e não apenas na preferência humana, e - refinar seus modelos e planos de mundo ao longo da vida.