机器之心报道

机器之心编辑部

李宏毅、周博磊、李科浇等大咖老师亲笔推荐，datawhale 开源的蘑菇书 easyrl 强化学习教程终于有了第一版纸质书。

作为人工智能里最受关注的领域之一，强化学习的热度一直居高不下，在游戏、自动驾驶、机器人路线规划等领域得到了广泛的应用。但是，强化学习的学习难度也同样不低。

在学习强化学习的过程中，想必很多人都遇到过有无数资料却难以入门的问题。于是，非盈利性开源学习组织 datawhale 发起了强化学习系列教程 ——easy-rl，希望自学的同时帮助更多学习者轻松入门。

该教程也被称为「蘑菇书」，主要萃取了强化学习领域经典中文视频之一 —— 李宏毅老师的《深度强化学习》教程、周博磊老师的《强化学习纲要》和李科浇老师的《世界冠军带你从零实践强化学习》等经典课程。

发布 10 个月以来，该教程已经在 github 上获得了 3.6k star。

"

github 项目地址：https://github.com/datawhalechina/easy-rl

datawhale 免费提供了 pdf 版教程，目前下载量已经 1 万。2022 年 2 月 1 日，在人民邮电出版社的支持下，《easy rl 强化学习教程》第一版纸质书终于问世。

"

本书适合对强化学习感兴趣的读者阅读，也可以作为相关课程的配套教材。

书籍特色及大纲

首先，本书结合了强化学习领域公开课的精华。比如，李宏毅老师的《深度强化学习》通过幽默风趣的上课风格让晦涩难懂的强化学习理论变得轻松易懂，他会通过很多有趣的例子来讲解强化学习理论。

来自中科院大学、清华、北大的三位发起者 —— 王琦、杨毅远和江季，通过自学这 3 门公开课，根据自身的理解整理优化得来了《easy rl：强化学习教程》，并且获得了三位公开课老师的支持。

"

其次，本书完全根据学习经历编著而成。本书完全从读者学习的角度出发，既有学霸学长在学习中的重点 ——3 门公开课的精华内容，还有学霸凝练的精华和扩展的内容 —— 作者们在大部分章末设置了原创的关键词、习题和面试题，提供 python 代码实现。帮助初学者避「坑」，用轻松的步伐入门强化学习。其实，每个人在学习一门新的课程时，都会有自己独特的经验和方法，这种经验和方法的共享非常难能可贵。

最后，本书得到了李宏毅、周博磊、李科浇、汪军、张伟楠、李升波、胡裕靖等 7 位强化学习领域大咖老师的亲笔认可和推荐。

具体地，本书共 13 章，大体上可以分为两个部分。

第一部分包括第 1~3 章，介绍强化学习基础知识以及马尔可夫决策过程、蒙特卡洛方法、时序差分方法、sarsa、q 学习传统强化学习算法。

第二部分包括第 4~13 章，介绍策略梯度、近端策略优化、深度 q 网络、深度确定性策略梯度等深度强化学习算法及其常见问题的解决方法。该部分各章节相对独立，读者可以根据自己的兴趣和时间选择性阅读。

此外，本书还提供较为全面的习题解答以及 python 代码实现，可以让读者进行端到端、从理论到轻松实践的全生态学习，充分掌握强化学习算法的原理并能进行实战。

部分章节目录如下：

"

给读者的三点学习建议

一，通过关键词高效入门。

为了尽可能地降低阅读门槛，作者们在「蘑菇书」中对 3 门公开课的精华内容进行了选取和优化，对所涉及的公式给出了详细的推导过程，对较难理解的知识点进行了重点讲解和强化，以方便读者轻松入门。并且，为了丰富内容，书中还补充了不少 3 门公开课之外的强化学习相关知识。

在学习过程中，可以通过书中总结的大量关键词概念，高效地回忆并掌握核心内容。

二，可以作为面试前的准备。

书籍拓展了习题和面试题：习题部分以问答的形式阐述了相应章中出现的知识点，帮助读者厘清知识脉络；面试题部分的内容源于大厂的算法岗面试真题，通过还原真实的面试场景和面试问题，帮助读者开阔思路，助力大家面试理想的岗位。

"

题目配有答案详解。

三，通过代码实战深入理解。

强化学习是一个理论与实践相结合的学科，我们不仅要理解算法背后的原理，还要通过上机实践来实现算法，让理论知识得到实际的应用。

书籍配有 python 代码实现源代码，大家可以亲自动手实现各种经典的强化学习算法，通过实战更清晰地理解算法并快速应用。

作者简介

王琦，中国科学院大学硕士在读，datawhale 成员。主要研究方向为深度学习、数据挖掘。曾获中国大学生计算机设计大赛二等奖、亚太地区大学生数学建模竞赛 （apmcm）二等奖和「挑战杯」竞赛江苏省选拔赛二等奖，发表 sci/ei 论文 3 篇。

杨毅远，清华大学硕士在读， datawhale 成员。主要研究方向为时空数据挖掘、智能传感系统、深度学习。曾获全国大学生智能汽车竞赛总冠军、中国国家奖学金，发表 sci/ei 论文 7 篇，其中以第一作者身份在 sci 的 q1 区、q2 区及中国计算机学会（ccf）a、b 类会议中发表论文 4 篇。

江季，北京大学硕士在读， datawhale 成员。主要研究方向为强化学习、机器人。曾获大学生电子设计竞赛 —2018 年嵌入式系统专题邀请赛（英特尔杯）一等奖，发表顶会论文 1 篇、专利 2 项。

欧美剧机器之心第1季全集高清观看由4m影院整理于网络，并免费提供机器之心第1季高清剧照，机器之心第1季百度云在线播放等资源，在线播放有酷播，腾讯视频，优酷视频，爱奇艺视频等多种在线播放模式，在播放不流畅的情况下可以尝试切换播放源。如果你喜欢这部片子，可以分享给你的亲朋好友一起免费观看。4m影院收集各类经典电影，是电影爱好者不二的网站选择！