Обучение с подкреплением: Введение. Второе издание

Книга «Обучение с подкреплением: Введение» Ричарда Саттона и Эндрю Барто является классическим и фундаментальным учебником по одной из ключевых областей машинного обучения. Второе издание представляет собой обновлённую и расширенную версию, отражающую современное состояние дисциплины, которая объединяет идеи из искусственного интеллекта, теории управления, психологии и нейронаук.

В первой части книги читатель знакомится с базовыми аспектами и табличными методами решения задач обучения с подкреплением. Авторы делают акцент на практическое применение, начиная с простых примеров, таких как задача о многоруком бандите, и постепенно переходя к более сложным концепциям. Этот подход позволяет построить прочный фундамент для понимания основных алгоритмов и принципов.

Вторая часть посвящена приближённым методам, которые позволяют решать задачи в условиях ограниченных вычислительных ресурсов, что критически важно для реальных приложений. Третья часть исследует связь обучения с подкреплением с психологией и нейронауками, подчёркивая междисциплинарную природу этой области.

Издание предназначено для широкого круга читателей: студентов технических вузов, разработчиков, специализирующихся на машинном обучении и искусственном интеллекте, а также представителей нетехнических профессий, которые могут применять описанные методики в своей работе. Книга служит как введением для новичков, так и ценным справочником для опытных практиков.