《深度强化学习实践马克西姆拉潘(Maxim》[86M]百度网盘|pdf下载|亲测有效

书名：	深度强化学习实践（原书第2版）\|8083088
图书定价：	149元
图书作者：	[俄] 马克西姆·拉潘(Maxim Lapan)
出版社：	机械工业出版社
出版日期：	2021/8/4 0:00:00
ISBN号：	9787111687382
开本：	16开
页数：	634
版次：	1-1

作者简介

关于我们
客户服务
友情链接

内容简介

本书理论与实践相结合，系统阐述强化学习的基础知识，以及如何动手编写智能体以执行一系列实际任务。通过阅读本书，读者将获得深层Q网络、策略梯度方法、连续控制问题以及高度可扩展的非梯度方法等主题领域的可行洞见，还将学会如何构建一个经过强化学习训练、价格低廉的真实硬件机器人，并通过一步步代码优化在短短30分钟的训练后解决Pong环境。此外，本书还专门介绍了强化学习的新发展，包括离散优化（解决魔方问题）、多智能体方法、Microsoft的TextWorld环境、高级探索技术等。

译者序
前言
作者简介
审校者简介
第1章　什么是强化学习1
1.1　机器学习分类2
1.1.1　监督学习2
1.1.2　非监督学习2
1.1.3　强化学习2
1.2　强化学习的复杂性4
1.3　强化学习的形式4
1.3.1　奖励5
1.3.2　智能体6
1.3.3　环境6
1.3.4　动作7
1.3.5　观察7
1.4　强化学习的理论基础9
1.4.1　马尔可夫决策过程9
1.4.2　策略17
1.5　总结18
第2章　OpenAI Gym19
2.1　剖析智能体19
2.2　硬件和软件要求21
2.3　OpenAI Gym API23
2.3.1　动作空间23
2.3.2　观察空间23
2.3.3　环境25
2.3.4　创建环境26
2.3.5　车摆系统28
2.4　随机CartPole智能体30
2.5　Gym的额外功能：包装器和监控器30
2.5.1　包装器31
2.5.2　监控器33
2.6　总结35
第3章　使用PyTorch进行深度学习36
3.1　张量36
3.1.1　创建张量37
3.1.2　零维张量39
3.1.3　张量操作39
3.1.4　GPU张量40
3.2　梯度41
3.3　NN构建块44
3.4　自定义层45
3.5　*终黏合剂：损失函数和优化器47
3.5.1　损失函数48
3.5.2　优化器48
3.6　使用TensorBoard进行监控50
3.6.1　TensorBoard 10150
3.6.2　绘图52
3.7　示例：将GAN应用于Atari图像53
3.8　PyTorch Ignite57
3.9　总结61
第4章　交叉熵方法62
4.1　RL方法的分类62
4.2　交叉熵方法的实践63
4.3　交叉熵方法在CartPole中的应用65
4.4　交叉熵方法在FrozenLake中的应用72
4.5　交叉熵方法的理论背景78
4.6　总结79
第5章　表格学习和Bellman方程80
5.1　价值、状态和*优性80
5.2　*佳Bellman方程82
5.3　动作的价值84
5.4　价值迭代法86
5.5　价值迭代实践87
5.6　Q-learning在FrozenLake中的应用92
5.7　总结94
第6章　深度Q-network95
6.1　现实的价值迭代95
6.2　表格Q-learning96
6.3　深度Q-learning100
6.3.1　与环境交互102
6.3.2　SGD优化102
6.3.3　步骤之间的相关性103
6.3.4　马尔可夫性质103
6.3.5　DQN训练的*终形式103
6.4　DQN应用于Pong游戏104
6.4.1　包装器105
6.4.2　DQN模型109
6.4.3　训练110
6.4.4　运行和性能118
6.4.5　模型实战120
6.5　可以尝试的事情122
6.6　总结123
第7章　高级强化学习库124
7.1　为什么使用强化学习库124
7.2　PTAN库125
7.2.1　动作选择器126
7.2.2　智能体127
7.2.3　经验源131
7.2.4　经验回放缓冲区136
7.2.5　TargetNet类137
7.2.6　Ignite帮助类139
7.3　PTAN版本的CartPole解决方案139
7.4　其他强化学习库141
7.5　总结141
第8章　DQN扩展142
8.1　基础DQN143
8.1.1　通用库143
8.1.2　实现147
8.1.3　结果148
8.2　N步DQN150
8.2.1　实现152
8.2.2　结果152
8.3　Double DQN153
8.3.1　实现154
8.3.2　结果155
8.4　噪声网络156
8.4.1　实现157
8.4.2　结果159
8.5　带优先级的回放缓冲区160
8.5.1　实现161
8.5.2　结果164
8.6　Dueling DQN165
8.6.1　实现166
8.6.2　结果167
8.7　Categorical DQN168
8.7.1　实现171
8.7.2　结果175
8.8　组合所有方法178
8.9　总结180
8.10　参考文献180
第9章　加速强化学习训练的方法182
9.1　为什么速度很重要182
9.2　基线184
9.3　PyTorch中的计算图186
9.4　多个环境188
9.5　在不同进程中分别交互和训练190
9.6　调整包装器194
9.7　基准测试总结198
9.8　硬核CuLE199
9.9　总结199
9.10　参考文献199
第10章　使用强化学习进行股票交易200
10.1　交易200
10.2　数据201
10.3　问题陈述和关键决策202
10.4　交易环境203
10.5　模型210
10.6　训练代码211
10.7　结果211
10.7.1　前馈模型212
10.7.2　卷积模型217
10.8　可以尝试的事情218
10.9　总结219
第11章　策略梯度：一种替代方法220
11.1　价值与策略220
11.1.1　为什么需要策略221
11.1.2　策略表示221
11.1.3　策略梯度222
11.2　REINFORCE方法222
11.2.1　CartPole示例223
11.2.2　结果227
11.2.3　基于策略的方法与基于价值的方法228
11.3　REINFORCE的问题229
11.3.1　需要完整片段229
11.3.2　高梯度方差229
11.3.3　探索230
11.3.4　样本相关性230
11.4　用于CartPole的策略梯度方法230
11.4.1　实现231
11.4.2　结果233
11.5　用于Pong的策略梯度方法237
11.5.1　实现238
11.5.2　结果239
11.6　总结240
第12章　actor-critic方法241
12.1　减小方差241
12.2　CartPole的方差243
12.3　actor-critic246
12.4　在Pong中使用A2C247
12.5　在Pong中使用A2C的结果252
12.6　超参调优255
12.6.1　学习率255
12.6.2　熵的beta值256
12.6.3　环境数256
12.6.4　批大小257
12.7　总结257
第13章　A3C258
13.1　相关性和采样效率258
13.2　向A2C添加另一个A259
13.3　Python中的多重处理功能261
13.4　数据并行化的A3C262
13.4.1　实现262
13.4.2　结果267
13.5　梯度并行化的A3C269
13.5.1　实现269
13.5.2　结果273
13.6　总结274
第14章　使用强化学习训练聊天机器人275
14.1　聊天机器人概述275
14.2　训练聊天机器人276
14.3　深度NLP基础277
14.3.1　RNN277
14.3.2　词嵌入278
14.3.3　编码器–解码器架构279
14.4　seq2seq训练280
14.4.1　对数似然训练280
14.4.2　双语替换评测分数282
14.4.3　seq2seq中的强化学习282
14.4.4　自评序列训练283
14.5　聊天机器人示例284
14.5.1　示例的结构285
14.5.2　模块：cornell.py和data.py285
14.5.3　BLEU分数和utils.py286
14.5.4　模型287
14.6　数据集探索292
14.7　训练：交叉熵294
14.7.1　实现294
14.7.2　结果298
14.8　训练：SCST300
14.8.1　实现300
14.8.2　结果306
14.9　经过数据测试的模型309
14.10　Telegram机器人311
14.11　总结314
第15章　TextWorld环境315
15.1　文字冒险游戏315
15.2　环境318
15.2.1　安装318
15.2.2　游戏生成318
15.2.3　观察和动作空间320
15.2.4　额外的游戏信息322
15.3　基线DQN325
15.3.1　观察预处理326
15.3.2　embedding和编码器331
15.3.3　DQN模型和智能体333
15.3.4　训练代码335
15.3.5　训练结果335
15.4　命令生成模型340
15.4.1　实现341
15.4.2　预训练结果345
15.4.3　DQN训练代码346
15.4.4　DQN训练结果347
15.5　总结349
第16章　Web导航350
16.1　Web导航简介350
16.1.1　浏览器自动化和RL351
16.1.2　MiniWoB基准352
16.2　OpenAI Universe353
16.2.1　安装354
16.2.2　动作与观察354
16.2.3　创建环境355
16.2.4　M...

深度强化学习实践马克西姆拉潘(Maxim pdf下载

内容简介

相关推荐

国土资源信息系统

FPGAVerilog开发实战指南：基于IntelCycloneIV（基础篇)

程序员至年试题分析与解答

HCIP-Datacom认证实验指南 2023华为数通认证实验手册华为HCIP路由与交换技术hcipdatacom云计算