Rich Sutton har just publicerat sin viktigaste essä om AI sedan The Bitter Lesson: "Welcome to the Era of Experience" Sutton och hans rådgivare Silver hävdar att "eran av mänskliga data", som domineras av övervakad förträning och RL-från-människa-feedback, har drabbats av minskande avkastning; Framtiden kommer att tillhöra agenter som — agera kontinuerligt i verkliga eller simulerade världar, — generera och märka sina egna träningsdata genom interaktion — optimera belöningar som grundar sig på miljön snarare än på enbart mänskliga preferenser, och — förfina sina världsmodeller och planer över livslånga erfarenhetsströmmar.