Rich Sutton hat gerade seinen wichtigsten Essay über KI seit "The Bitter Lesson" veröffentlicht: "Welcome to the Era of Experience" Sutton und sein Berater Silver argumentieren, dass die "Ära der menschlichen Daten", die von überwachtem Vortraining und RL-from-Human-Feedback dominiert wird, zu sinkenden Erträgen geführt hat; Die Zukunft gehört den Akteuren, die — ständig in realen oder simulierten Welten agieren, — Generieren und beschriften Sie ihre eigenen Trainingsdaten durch Interaktion — Belohnungen zu optimieren, die auf der Umwelt und nicht nur auf menschlichen Präferenzen beruhen, und – ihre Weltmodelle und -pläne über lebenslange Erfahrungsströme hinweg verfeinern.