Rich Sutton acaba de publicar su ensayo más importante sobre IA desde The Bitter Lesson: "Bienvenidos a la era de la experiencia" Sutton y su asesor Silver argumentan que la "era de los datos humanos", dominada por el entrenamiento previo supervisado y la retroalimentación de RL a partir de humanos, ha tenido rendimientos decrecientes; el futuro pertenecerá a los agentes que — actuar de forma continuada en mundos reales o simulados, — generar y etiquetar sus propios datos de entrenamiento a través de la interacción — optimizar las recompensas basadas en el entorno y no únicamente en las preferencias humanas, y — refinar sus modelos y planes del mundo a lo largo de toda la vida de la experiencia.