---
product_id: 745719043
title: "Reinforcement Learning, second edition: An Introduction (Adaptive Computation and Machine Learning series)"
price: "KD 51.89"
currency: KWD
in_stock: true
reviews_count: 9
url: https://www.desertcart.com.kw/products/745719043-reinforcement-learning-second-edition-an-introduction-adaptive-computation-and-machine
store_origin: KW
region: Kuwait
---

# Reinforcement Learning, second edition: An Introduction (Adaptive Computation and Machine Learning series)

**Price:** KD 51.89
**Availability:** ✅ In Stock

## Quick Answers

- **What is this?** Reinforcement Learning, second edition: An Introduction (Adaptive Computation and Machine Learning series)
- **How much does it cost?** KD 51.89 with free shipping
- **Is it available?** Yes, in stock and ready to ship
- **Where can I buy it?** [www.desertcart.com.kw](https://www.desertcart.com.kw/products/745719043-reinforcement-learning-second-edition-an-introduction-adaptive-computation-and-machine)

## Best For

- Customers looking for quality international products

## Why This Product

- Free international shipping included
- Worldwide delivery with tracking
- 15-day hassle-free returns

## Description

desertcart.co.jp: Reinforcement Learning, second edition: An Introduction (Adaptive Computation and Machine Learning series) : Sutton, Richard S., Barto, Andrew G.: Foreign Language Books

Review: ・ドラフト版（2018年2月ぐらいのもの）のパート2までほとんど読み切っていたので購入しました（最後のパート3はほとんどが神経科学や応用のお話です）．ざっと見てはドラフト版と大きくは変わっていないようです． ・基本的な方針・雰囲気は初版と同じで図と文章での説明が中心ですが，数式が若干増えたかもしれません．適格度トレースの説明は若干分かりにくくなったかも． ・英語は若干まどろっこしい感じがあって，コード本ほどスラスラとは読めない感じがしました． ・数式の展開・擬似コードの記述は初版と同じく丁寧で分かりやすいと思います． ・タイトルの通り，深層強化学習について直接触れているわけではありません，が，関数近似のパートを読むと，何故近年の深層強化学習においてベルマン方程式に基づくTDバックアップが直接は行われず，SGDを用いているかについて知見が得られるなど，近年の研究のモチベーションを理解するのに役立ちます（他には，ツリーバックアップを見れば，TRPOのVineに対して自然に理解できるようになります）．また，n-stepバックアップ（A3Cで使用）・適格度トレース（PPOで使用されていたような…）についてやさしく説明している本が他にあまり見当たらないのでそこも貴重です． ・TD学習の収束性の証明について，一応触れられているものの一箇所論文任せになっています． ・方策ベースの方法，特にアクタークリティックに関してはもう少し詳しく説明があっても良かったかも．また，方策勾配定理の証明は割引率γ=1のケースのみですが，Webで探せば一般的なケースのものも見つかります． ・個人的に，初版でイマイチ歯切れが悪かったように感じた箇所はかなりカットされています．
Review: 本書の内容に沿ってPython Simulatorを作成しながら、また、関連の最近の論文も読みながら読んでいるが、説明の内容は現在の技術動向、研究動向に照らし合わせても適切な内容に見える。強化学習を効率的に理解するのに役に立つ。従来から研究している進化的方法との比較、融合などを、本書も参考にしながら行う予定。

## Technical Specifications

| Specification | Value |
|---------------|-------|
| Amazon Bestseller | #21,123 in Foreign Language Books ( See Top 100 in Foreign Language Books ) #29 in AI Robotics #35 in Computer Neural Networks #59 in Programming Algorithms |
| Customer Reviews | 4.6 4.6 out of 5 stars (609) |
| Dimensions  | 7.24 x 1.5 x 9.29 inches |
| Edition  | 2nd |
| ISBN-10  | 0262039249 |
| ISBN-13  | 978-0262039246 |
| Item Weight  | 1.2 Kilograms |
| Language  | English |
| Print length  | 552 pages |
| Publication date  | November 13, 2018 |
| Publisher  | Bradford Books |
| Reading age  | 18 years and up |

## Images

![Reinforcement Learning, second edition: An Introduction (Adaptive Computation and Machine Learning series) - Image 1](https://m.media-amazon.com/images/I/71nk3rOK3jL.jpg)

## Customer Reviews

### ⭐⭐⭐⭐⭐ Review
*by 羊***羊 on November 14, 2018*

・ドラフト版（2018年2月ぐらいのもの）のパート2までほとんど読み切っていたので購入しました（最後のパート3はほとんどが神経科学や応用のお話です）．ざっと見てはドラフト版と大きくは変わっていないようです． ・基本的な方針・雰囲気は初版と同じで図と文章での説明が中心ですが，数式が若干増えたかもしれません．適格度トレースの説明は若干分かりにくくなったかも． ・英語は若干まどろっこしい感じがあって，コード本ほどスラスラとは読めない感じがしました． ・数式の展開・擬似コードの記述は初版と同じく丁寧で分かりやすいと思います． ・タイトルの通り，深層強化学習について直接触れているわけではありません，が，関数近似のパートを読むと，何故近年の深層強化学習においてベルマン方程式に基づくTDバックアップが直接は行われず，SGDを用いているかについて知見が得られるなど，近年の研究のモチベーションを理解するのに役立ちます（他には，ツリーバックアップを見れば，TRPOのVineに対して自然に理解できるようになります）．また，n-stepバックアップ（A3Cで使用）・適格度トレース（PPOで使用されていたような…）についてやさしく説明している本が他にあまり見当たらないのでそこも貴重です． ・TD学習の収束性の証明について，一応触れられているものの一箇所論文任せになっています． ・方策ベースの方法，特にアクタークリティックに関してはもう少し詳しく説明があっても良かったかも．また，方策勾配定理の証明は割引率γ=1のケースのみですが，Webで探せば一般的なケースのものも見つかります． ・個人的に，初版でイマイチ歯切れが悪かったように感じた箇所はかなりカットされています．

### ⭐⭐⭐⭐ Review
*by H***O on March 2, 2021*

本書の内容に沿ってPython Simulatorを作成しながら、また、関連の最近の論文も読みながら読んでいるが、説明の内容は現在の技術動向、研究動向に照らし合わせても適切な内容に見える。強化学習を効率的に理解するのに役に立つ。従来から研究している進化的方法との比較、融合などを、本書も参考にしながら行う予定。

### ⭐ Review
*by K***様 on August 13, 2021*

新品の本を買ったはずがボコボコの中古本が届いた。 新品と取替えて欲しい。 内容に関してはこれから読むのでレビューできません。

## Frequently Bought Together

- Reinforcement Learning, second edition: An Introduction (Adaptive Computation and Machine Learning series)
- Deep Learning (Adaptive Computation and Machine Learning series)
- The Elements of Statistical Learning: Data Mining, Inference, and Prediction, Second Edition (Springer Series in Statistics)

---

## Why Shop on Desertcart?

- 🛒 **Trusted by 1.3+ Million Shoppers** — Serving international shoppers since 2016
- 🌍 **Shop Globally** — Access 737+ million products across 21 categories
- 💰 **No Hidden Fees** — All customs, duties, and taxes included in the price
- 🔄 **15-Day Free Returns** — Hassle-free returns (30 days for PRO members)
- 🔒 **Secure Payments** — Trusted payment options with buyer protection
- ⭐ **TrustPilot Rated 4.5/5** — Based on 8,000+ happy customer reviews

**Shop now:** [https://www.desertcart.com.kw/products/745719043-reinforcement-learning-second-edition-an-introduction-adaptive-computation-and-machine](https://www.desertcart.com.kw/products/745719043-reinforcement-learning-second-edition-an-introduction-adaptive-computation-and-machine)

---

*Product available on Desertcart Kuwait*
*Store origin: KW*
*Last updated: 2026-03-17*