Titre: A Tutorial on Linear Function Approximators for Dynamic Programming and Reinforcement Learning (Foundations and Trends� in Machine Learning)
�diteur: Now Publishers
Date de parution: 2013
Langue: anglais
ISBN � 10 chiffres: 1601987609
ISBN � 13 chiffres: 9781601987600
Reliure: Couverture souple
�tat de l'article: Used Like New

A propos de ce titre

Synopsis

A Markov Decision Process (MDP) is a natural framework for formulating sequential decision-making problems under uncertainty. In recent years, researchers have greatly advanced algorithms for learning and acting in MDPs.

This book reviews such algorithms, beginning with well-known dynamic programming methods for solving MDPs such as policy iteration and value iteration, then describes approximate dynamic programming methods such as trajectory based value iteration, and finally moves to reinforcement learning methods such as Q-Learning, SARSA, and least-squares policy iteration. It describes algorithms in a unified framework, giving pseudocode together with memory and iteration complexity analysis for each. Empirical evaluations of these techniques, with four representations across four domains, provide insight into how these algorithms perform with various feature sets in terms of running time and performance.

This tutorial provides practical guidance for researchers seeking to extend DP and RL techniques to larger domains through linear value function approximation. The practical algorithms and empirical successes outlined also form a guide for practitioners trying to weigh computational costs, accuracy requirements, and representational concerns. Decision making in large domains will always be challenging, but with the tools presented here this challenge is not insurmountable.

Pr�sentation de l'�diteur

A Markov Decision Process (MDP) is a natural framework for formulating sequential decision-making problems under uncertainty. In recent years, researchers have greatly advanced algorithms for learning and acting in MDPs. This book reviews such algorithms, beginning with well-known dynamic programming methods for solving MDPs such as policy iteration and value iteration, then describes approximate dynamic programming methods such as trajectory based value iteration, and finally moves to reinforcement learning methods such as Q-Learning, SARSA, and least-squares policy iteration. It describes algorithms in a unified framework, giving pseudocode together with memory and iteration complexity analysis for each. Empirical evaluations of these techniques, with four representations across four domains, provide insight into how these algorithms perform with various feature sets in terms of running time and performance. This tutorial provides practical guidance for researchers seeking to extend DP and RL techniques to larger domains through linear value function approximation. The practical algorithms and empirical successes outlined also form a guide for practitioners trying to weigh computational costs, accuracy requirements, and representational concerns. Decision making in large domains will always be challenging, but with the tools presented here this challenge is not insurmountable.

Les informations fournies dans la section � A propos du livre � peuvent faire r�f�rence � une autre �dition de ce titre.

Description de la librairie

In the centre of the picturesque Market Town of Hay-on-Wye, UK; we serve the British and International Book Trades 364 days per year. Whilst always caring for individual requirements we buy and sell entire collections and libraries and efficiently dispatch large consignments to your door, whether you are a collector, a shop, a university, or a school. Vist our Online Shop at http://www.hayonwyebooksellers.com

Visitez la page d�accueil du vendeur

Informations commerciales relatives au vendeur

Hay-on-Wye Booksellers
14 High Town, Hay-on-Wye, HR3 5AE, United Kingdom

Conditions de vente et de livraison

Conditions g�n�rales de vente

Mastercard, Visa, VisaDelta, Electron, Switch, Solo, cards accepted. Also cash and Sterling Checks (GBP Cheques). If you wish to pay via Switch/Maestro please ensure you enter in the start date and the issue number in the shopping basket. Alternatively you can enter in the information in the special intrusions field during the shopping basket.

Droit de r�tractation

Si vous �tes un consommateur, vous pouvez exercer votre droit de r�tractation sur le contrat conform�ment � ce qui suit. Le mot � consommateur � d�signe toute personne physique agissant � des fins qui n'entrent pas dans le cadre de son activit� commerciale, artisanale ou professionnelle.

Informations concernant le droit de r�tractation

Droit statutaire de r�tractation

Vous avez le droit d'exercer votre droit de r�tractation sur ce contrat dans les 14 jours sans donner de raison.

Le d�lai de r�tractation expirera au bout de 14 jours � compter du jour o� vous-m�me, ou un tiers autre que le transporteur et d�sign� par vous, prendrez physiquement possession de la derni�re marchandise, du dernier lot ou de la derni�re pi�ce.

Pour exercer votre droit de r�tractation, remplissez �lectroniquement et envoyez une d�claration claire sur notre site Web, sous � Vos achats � dans � Votre compte �. Nous vous communiquerons sans d�lai un accus� de r�ception de cette r�tractation sur un support durable (par exemple, par e-mail).

Pour respecter le d�lai de r�tractation, il vous suffit d'envoyer votre message concernant l'exercice de votre droit de r�tractation avant l'expiration du d�lai de r�tractation.

Effets de la r�tractation

Si vous exercez votre droit de r�tractation sur ce contrat, nous vous rembourserons tous les paiements que vous avez effectu�s, y compris les frais de livraison (� l'exception des frais suppl�mentaires r�sultant du choix d'un mode de livraison autre que le type de livraison standard le moins cher que nous proposons).

Nous pouvons d�duire du remboursement la perte de valeur de toute marchandise livr�e, si la perte est le r�sultat d'une manipulation inutile de votre part.

Nous effectuerons le remboursement dans les meilleurs d�lais, et au plus tard 14 jours apr�s le jour o� nous aurons �t� inform�s de votre d�cision d'exercer votre droit de r�tractation sur ce contrat.

Nous effectuerons le remboursement en utilisant le m�me moyen de paiement que celui que vous avez utilis� pour la transaction initiale, sauf si vous en avez express�ment convenu autrement ; en tout �tat de cause, aucuns frais ne vous seront factur�s � la suite d'un tel remboursement.

Nous pouvons suspendre le remboursement jusqu'� ce que nous ayons re�u les marchandises ou que vous ayez fourni la preuve que vous avez renvoy� les marchandises, en fonction de la premi�re �ventualit�.

Vous devez renvoyer les marchandises ou les remettre � Hay-on-Wye Booksellers, Hereford, HERE, United Kingdom, sans retard injustifi� et, en tout �tat de cause, au plus tard 14 jours � compter du jour o� vous nous avez communiqu� votre d�cision de r�tractation du pr�sent contrat. Le d�lai est respect� si vous renvoyez les marchandises avant l'expiration du d�lai de 14 jours. Vous devrez prendre en charge les frais directs du renvoi des marchandises. Vous n'�tes responsable que de toute diminution de valeur des marchandises r�sultant d'une manipulation autre que celle n�cessaire pour �tablir la nature, les caract�ristiques et le fonctionnement des marchandises.

Exceptions au droit de r�tractation

Le droit de r�tractation ne s'applique pas � ce qui suit :

Distribution de journaux, de revues ou de magazines, � l'exception des contrats d'abonnement ; et
Fourniture d'un contenu num�rique qui n'est pas fourni sur un support mat�riel (par exemple, sur un CD ou un DVD) si vous avez accept�, lors de votre commande, que nous puissions commencer � le livrer et que vous ne puissiez pas exercer votre droit de r�tractation une fois la livraison commenc�e.

Conditions d'exp�dition

Shipping costs are based on books weighing 2.2 LB, or 1 KG. If your book order is heavy or oversized, we may contact you to let you know extra shipping is required.

Frais d?exp�dition de Royaume-Uni�vers�Etats-Unis

Frais d?exp�dition de Royaume-Uni�vers�Etats-Unis
Quantit� command�e	19 � 31 jours ouvr�s	19 � 30 jours ouvr�s
Premier article	EUR 28.91	EUR 115.64

Les d�lais de livraison sont fix�s par les vendeurs et varient en fonction du transporteur et du lieu. Les commandes transitant par les douanes peuvent �tre retard�es et les acheteurs sont responsables de tous les droits ou frais associ�s. Les vendeurs peuvent vous contacter au sujet de frais suppl�mentaires afin de couvrir toute augmentation des co�ts d'exp�dition de vos articles.