Rich Sutton vient de publier son essai le plus important sur l’IA depuis The Bitter Lesson : « Welcome to the Era of Experience » Sutton et son conseiller Silver soutiennent que « l’ère des données humaines », dominée par la pré-formation supervisée et le retour d’information par renforcement, a connu des rendements décroissants ; l’avenir appartiendra aux agents qui — agir en continu dans des mondes réels ou simulés, — générer et étiqueter leurs propres données d’entraînement par l’interaction — optimiser les récompenses en fonction de l’environnement plutôt que de la seule préférence humaine, et – affiner leurs modèles et leurs plans du monde au fil de l’expérience tout au long de leur vie.