Reinforcement Learning: An Introduction

La nuova edizione notevolmente ampliata e aggiornata di un testo ampiamente diffuso sul Reinforcement Learning, uno dei settori di ricerca più attivi nell'ambito dell'intelligenza artificiale.

Il Reinforcement Learning è un approccio computazionale all'apprendimento in cui un agente cerca di massimizzare la quantità totale di ricompensa che ottiene interagendo con un ambiente complesso e incerto. In "Reinforcement Learning", Richard Sutton e Andrew Barto offrono una rappresentazione chiara e semplice delle idee e degli algoritmi centrali del campo. Questa seconda edizione è stata notevolmente ampliata e aggiornata, trattando nuovi argomenti e aggiornando quelli già esistenti.

Come la prima edizione, anche questa seconda edizione si concentra sugli algoritmi di apprendimento online di base, con il materiale matematico evidenziato in riquadri. La Parte I tratta tutto ciò che è possibile sul Reinforcement Learning, senza andare oltre il caso tabellare, per il quale possono essere trovate soluzioni esatte. Molti degli algoritmi presentati in questa parte sono nuovi nella seconda edizione, tra cui UCB, Expected Sarsa e Double Learning. La Parte II estende queste idee all'approssimazione delle funzioni, con nuove sezioni su argomenti come le reti neurali artificiali e la base di Fourier, e offre un trattamento ampliato dell'apprendimento off-policy e dei metodi di policy-gradient. La Parte III include nuovi capitoli sulle relazioni tra il Reinforcement Learning e la psicologia e le neuroscienze, oltre a un capitolo aggiornato sui casi studio, che comprende AlphaGo e AlphaGo Zero, il gioco di giochi Atari e la strategia di scommessa di IBM Watson. L'ultimo capitolo discute le future implicazioni sociali del Reinforcement Learning.