Рич Саттон только что опубликовал своё самое важное эссе об ИИ со времён "Горького урока": "Добро пожаловать в эпоху опыта". Саттон и его аспирант Сильвер утверждают, что "эпоха человеческих данных", доминирующая благодаря обучению с учителем и обучению с подкреплением на основе обратной связи от человека, достигла точки убывающей отдачи; будущее будет принадлежать агентам, которые: — действуют непрерывно в реальных или симулированных мирах, — генерируют и маркируют свои собственные обучающие данные через взаимодействие, — оптимизируют вознаграждения, основанные на окружающей среде, а не только на человеческих предпочтениях, и — совершенствуют свои модели мира и планы на протяжении всей жизни, используя потоки опыта.