| 开本：16开 |
| 纸张：胶版纸 |
| 包装：平装-胶订 |
| 是否套装：否 |
| 国际标准书号ISBN：9787115631541 |
| 所属分类：图书>计算机/网络>计算机理论 |
编辑推荐
【深度实践教程】继“蘑菇书”后全新打造，助读者快速入门强化学习代码实践。 【丰富内容覆盖】涵盖马尔可夫决策过程、动态规划、多种算法等核心知识。 【实践经验支撑】大部分内容基于三位作者实践经验编写。 【开源框架助力】提供“”开源代码框架，适应业界应用研究风格。 【针对性强】适合有编程基础且想快速进入实践应用阶段的读者。 【知识提炼串联】提炼强化学习核心理论，串联知识点。 【原创内容呈现】融入针对策略梯度算法的两种不同推导版本等原创内容商品详情内容简介
本书是继《 ：强化学习教程》（俗称“蘑菇书”）之后，为强化学习的读者专门打造的一本深入实践的全新教程。全书大部分内容基于位作者的实践经验，涵盖马尔可夫决策过程、动态规划、免模型预测、免模型控制、深度学习基础、算法、算法进阶、策略梯度、算法、与算法、算法等内容，旨在帮助读者快速入门强化学习的代码实践，并辅以一套开源代码框架“”，便于读者适应业界应用研究风格的代码。
与“蘑菇书”不同，本书对强化学习核心理论进行提炼，并串联知识点，重视强化学习代码实践的指导而不是对理论的详细讲解。本书适合具有一定编程基础且希望快速进入实践应用阶段的读者阅读。
目 录
第章绪论
为什么要学习强化学习？
强化学习的应用
强化学习方向概述
多智能体强化学习
模仿学习和逆强化学习
探索策略
实时环境
多任务强化学习
学习本书之前的一些准备
第章马尔可夫决策过程
马尔可夫决策过程
马尔可夫性质第章绪论
为什么要学习强化学习？
强化学习的应用
强化学习方向概述
多智能体强化学习
模仿学习和逆强化学习
探索策略
实时环境
多任务强化学习
学习本书之前的一些准备
第章马尔可夫决策过程
马尔可夫决策过程
马尔可夫性质
回报
状态转移矩阵
本章小结
练习题
第章动态规划
动态规划的编程思想
状态价值函数和动作价值函数
贝尔曼方程
策略迭代算法
价值迭代算法
本章小结
练习题
第章免模型预测
有模型与免模型
预测与控制
蒙特卡罗方法
时序差分方法
时序差分方法和蒙特卡罗方法的差异
步时序差分方法
本章小结
练习题
第章免模型控制
算法
表格
探索策略
算法
同策略算法与异策略算法
实战：算法
定义训练
定义算法
定义环境
设置参数
开始训练
结果分析
消融实验
实战：算法
本章小结
练习题
第章深度学习基础
强化学习与深度学习的关系
线性回归模型
梯度下降
逻辑回归模型
全连接网络
高级的神经网络模型
本章小结
练习题
第章算法
深度神经网络
经验回放
目标网络
实战：算法
伪代码
定义模型
经验回放
定义智能体
定义环境
设置参数
本章小结
练习题
第章算法进阶
算法
算法
算法
算法
实战：算法
实战：算法
实战：算法
实战：算法
伪代码
结构
本章小结
练习题
第章策略梯度
基于价值的算法的缺点
策略梯度算法
算法
策略梯度推导进阶
平稳分布
基于平稳分布的策略梯度推导
策略函数的设计
离散动作空间的策略函数
连续动作空间的策略函数
本章小结
练习题
第章算法
策略梯度算法的优缺点
算法
与算法
广义优势估计
实战：算法
定义模型
采样动作
策略更新
本章小结
练习题
第章与算法
算法
算法
算法的优缺点
算法
双网络
延迟更新
噪声正则化
实战：算法
伪代码
定义模型
动作采样
实战：算法
本章小结
练习题
第章算法
重要性采样
算法
一个常见的误区
实战：算法
算法伪代码
算法更新
本章小结
练习题
练习题答案
显示全部信息
作者简介
江季，网易高级算法工程师，硕士毕业于北京大学。成员，《 ：强化学习教程》《深度学习详解》作者。主要研究方向为强化学习、深度学习、大模型、机器人等。曾获国家奖学金、上海市优秀毕业生等，取得强化学习与游戏等相关专利多项。 王琦，上海交通大学人工智能重点实验室博士研究生，硕士毕业于中国科学院大学。成员，《 ：强化学习教程》《深度学习详解》作者， 成员， 社区志愿者。主要研究方向为视觉强化学习与世界模型。曾获“中国光谷·华为杯”第十九届中国研究生数学建模竞赛二等奖、中国大学生计算机设计大赛二等奖、亚太地区大学生数学建模竞赛（）二等奖等，发表、 论文多篇。 杨毅远，牛津大学计算机系博士研究生，硕士毕业于清华大学。成员，《 ：强化学习教程》《深度学习详解》作者。主要研究方向为时间序列、数据挖掘、智能传感系统、深度学习。曾获国家奖学金、北京市优秀毕业生、清华大学优秀硕士学位论文奖、全国大学生智能汽车竞赛总军等，发表、论文多篇。
【深度实践教程】继“蘑菇书”后全新打造，助读者快速入门强化学习代码实践。 【丰富内容覆盖】涵盖马尔可夫决策过程、动态规划、多种算法等核心知识。 【实践经验支撑】大部分内容基于三位作者实践经验编写。 【开源框架助力】提供“”开源代码框架，适应业界应用研究风格。 【针对性强】适合有编程基础且想快速进入实践应用阶段的读者。 【知识提炼串联】提炼强化学习核心理论，串联知识点。 【原创内容呈现】融入针对策略梯度算法的两种不同推导版本等原创内容商品详情内容简介
本书是继《 ：强化学习教程》（俗称“蘑菇书”）之后，为强化学习的读者专门打造的一本深入实践的全新教程。全书大部分内容基于位作者的实践经验，涵盖马尔可夫决策过程、动态规划、免模型预测、免模型控制、深度学习基础、算法、算法进阶、策略梯度、算法、与算法、算法等内容，旨在帮助读者快速入门强化学习的代码实践，并辅以一套开源代码框架“”，便于读者适应业界应用研究风格的代码。
与“蘑菇书”不同，本书对强化学习核心理论进行提炼，并串联知识点，重视强化学习代码实践的指导而不是对理论的详细讲解。本书适合具有一定编程基础且希望快速进入实践应用阶段的读者阅读。
目 录
第章绪论
为什么要学习强化学习？
强化学习的应用
强化学习方向概述
多智能体强化学习
模仿学习和逆强化学习
探索策略
实时环境
多任务强化学习
学习本书之前的一些准备
第章马尔可夫决策过程
马尔可夫决策过程
马尔可夫性质第章绪论
为什么要学习强化学习？
强化学习的应用
强化学习方向概述
多智能体强化学习
模仿学习和逆强化学习
探索策略
实时环境
多任务强化学习
学习本书之前的一些准备
第章马尔可夫决策过程
马尔可夫决策过程
马尔可夫性质
回报
状态转移矩阵
本章小结
练习题
第章动态规划
动态规划的编程思想
状态价值函数和动作价值函数
贝尔曼方程
策略迭代算法
价值迭代算法
本章小结
练习题
第章免模型预测
有模型与免模型
预测与控制
蒙特卡罗方法
时序差分方法
时序差分方法和蒙特卡罗方法的差异
步时序差分方法
本章小结
练习题
第章免模型控制
算法
表格
探索策略
算法
同策略算法与异策略算法
实战：算法
定义训练
定义算法
定义环境
设置参数
开始训练
结果分析
消融实验
实战：算法
本章小结
练习题
第章深度学习基础
强化学习与深度学习的关系
线性回归模型
梯度下降
逻辑回归模型
全连接网络
高级的神经网络模型
本章小结
练习题
第章算法
深度神经网络
经验回放
目标网络
实战：算法
伪代码
定义模型
经验回放
定义智能体
定义环境
设置参数
本章小结
练习题
第章算法进阶
算法
算法
算法
算法
实战：算法
实战：算法
实战：算法
实战：算法
伪代码
结构
本章小结
练习题
第章策略梯度
基于价值的算法的缺点
策略梯度算法
算法
策略梯度推导进阶
平稳分布
基于平稳分布的策略梯度推导
策略函数的设计
离散动作空间的策略函数
连续动作空间的策略函数
本章小结
练习题
第章算法
策略梯度算法的优缺点
算法
与算法
广义优势估计
实战：算法
定义模型
采样动作
策略更新
本章小结
练习题
第章与算法
算法
算法
算法的优缺点
算法
双网络
延迟更新
噪声正则化
实战：算法
伪代码
定义模型
动作采样
实战：算法
本章小结
练习题
第章算法
重要性采样
算法
一个常见的误区
实战：算法
算法伪代码
算法更新
本章小结
练习题
练习题答案
显示全部信息
作者简介
江季，网易高级算法工程师，硕士毕业于北京大学。成员，《 ：强化学习教程》《深度学习详解》作者。主要研究方向为强化学习、深度学习、大模型、机器人等。曾获国家奖学金、上海市优秀毕业生等，取得强化学习与游戏等相关专利多项。 王琦，上海交通大学人工智能重点实验室博士研究生，硕士毕业于中国科学院大学。成员，《 ：强化学习教程》《深度学习详解》作者， 成员， 社区志愿者。主要研究方向为视觉强化学习与世界模型。曾获“中国光谷·华为杯”第十九届中国研究生数学建模竞赛二等奖、中国大学生计算机设计大赛二等奖、亚太地区大学生数学建模竞赛（）二等奖等，发表、 论文多篇。 杨毅远，牛津大学计算机系博士研究生，硕士毕业于清华大学。成员，《 ：强化学习教程》《深度学习详解》作者。主要研究方向为时间序列、数据挖掘、智能传感系统、深度学习。曾获国家奖学金、北京市优秀毕业生、清华大学优秀硕士学位论文奖、全国大学生智能汽车竞赛总军等，发表、论文多篇。