一、课程简介

深度学习是机器学习领域中一个新的研究方向，其目标是建立模拟人脑进行分析学习的神经网络，并通过这套机制识别与解释文字、图像和声音等数据，从而使人工智能变为可能。本项目是英国剑桥大学设计的线上远程教学项目，旨在为学生创造世界顶级大学的学习体验机会，提升学生在深度学习前沿领域的研究技能，掌握软件编写技巧，并且了解该领域与其它领域之间的关联与发展潜力。

课程特色：

1.原汁原味的剑桥课程。由剑桥大学计算机科学教授亲自参与设计与授课，确保课程专业性与品质；

2.实时授课，注重互动。课程全部为剑桥老师的真人实时直播授课，非录播形式，保证与学生的互动效果；

3.四六级可申请。无需托福雅思成绩，用大学英语四/六级即可入读剑桥课程；

4.成绩单与学习证明。可获得剑桥大学颁发的成绩单与项目证书，为个人履历添砖加瓦。

课程内容：

剑桥大学格顿学院的暑期在线深度强化学习项目有以下主要特点：

1.项目为期三周，包含总共20个实时直播课时，多数课程预计会安排在北京时间下午至晚间进行（实际授课时间以校方最终安排为准）；

2.授课形式包括系列专题讲座+实践（总共10场，每场各2小时）；

3.学生均会注册成为剑桥大学格顿学院的学生，并且获权使用剑桥大学的教学管理平台Moodle。剑桥老师通过ZOOM平台在线授课，课前阅读以及作业布置则会通过Moodle安排。

课程将探讨深度强化学习的最新潜力，侧重于强化学习和深度学习的基础知识（包括卷积神经网络、图形神经网络、生成神经网络和Transformer模型），并将分享机器人和游戏中的实例，从而加强学生对深度学习核心理念的了解，提升相关的研究技能与实用技巧。

以下为计划的课程内容（以实际安排为准）：

7.25日周一

讲座内容：强化学习导论主题。强化学习的算法和框架；遗传算法，帕累托前沿；强化学习与深度学习的联系（Transformers模型、图形神经网络）；强化学习案例分析；如何撰写相关文章。

实践内容：科学计算工具简介主题；Jupyter Notebook的基本使用以及LaTeX；强化学习框架中的基本组件；小组项目说明。

7.27日周三

讲座内容：环境主题。环境复杂性建模；多智能体强化学习（MARL）；Q-Learning以及Actor-Critic模型；基于政策的学习；马尔可夫决策过程、动态编程和贝尔曼方程；强化学习与深度学习的联系。

实践内容：环境主题；强化学习框架中的基本组件；；马尔可夫决策过程；OpenAI Gym简介小组项目说明。

7.29日周五

讲座内容：优化主题。强化学习与控制优化；深度Q网络；强化学习与深度学习的联系；强化学习案例；Transformers模型和图像分析集成。

实践内容：Pytork简介；备份图；使用马尔可夫决策过程进行优化（动态编程、贝尔曼方程、策略迭代、值迭代）；项目进展汇报。

8.2日周二

讲座内容：集成与控制主题。机器人与贡献度分配问题；冗余度机器人的自适应运动控制；多智能体强化学习与机器人；强化学习与其他深度学习技巧的整合。

实践内容：无模型算法主题。基于价值的算法（蒙特卡罗、时间差分学习、SARSA、Q-learning、DQN及其变体）；项目进展汇报。

8.3日周三

讲座内容：集成主题。与图形神经网络的集成；关注和信息传递模型；与AUTO-ML和ML系统的集成。

实践内容：无模型算法主题。基于策略的算法（策略梯度、增强）；Actor-Critic算法；项目进展汇报。

8.4日周四

讲座内容：图神经网络（GNN）与强化学习主题。图示学习与强化学习的关联。

实践内容：图神经网络练习，项目进展汇报。

8.5日周五

讲座内容：监管图神经网络主题。图神经网络与游戏的理论与运用。

实践内容：图神经网络练习主题。DGL, Spektral, Pytorch；项目进展汇报。

8.8日周一

讲座内容：无监管图神经网络主题。图神经网络与机器人。

实践内容：图神经网络练习主题。DGL, Spektral, Geometric Pytorch；项目进展汇报。

8.9日周二

讲座内容：图神经网络（GNN）与强化学习：高级建模。

实践内容：项目进展汇报。

8.12日周五

项目回顾与总结；小组项目成果陈述。

二、课程时间

2022年7月25日-8月12日（3周）

三、课程费用

约合人民币12060元,费用包括项目服务费，学杂费

四、项目申请

项目名额：20名

项目申请截止日期：

2022年6月24日

选拔要求：

1.仅限本校全日制在校生，本科和研究生均可申请；成绩优异、道德品质好，在校期间未受过纪律处分，身心健康，能顺利完成在线学习任务；

2.英语要求：具备优秀的英语基础，达到大学英语四级500分，或大学英语六级470分，或托福79，或雅思6.0，或Duolingo105；

3.家庭具有一定经济基础，能够提供访学所需费用；

4.通过项目面试、学术审核以及我校的资格审核

申请方式与报名流程：

第一步：项目咨询和申请，并填写报名表，链接如下：

https://k8mm1amta1700adb471ba12b.cloudcc.com/customize/page/6392e0939/ce.jsp?name=ce， 通过外方院校审核

第二步：拿到对方的录取函后在校内备案

研究生请前往http://gs.dhu.edu.cn/9622/list.htm下载表格，填好之后提供学院同意的截图，将电子表格和同意的截图发到研究生部邮箱：wulianchao@dhu.edu.cn，并抄送国际合作处张老师的邮箱：snow@dhu.edu.cn。若填写中有疑问，请咨询研究生部吴老师67792427。

本科生请在东华大学新教务系统的校外交流申请栏目中填写并提交申请。若填写中有疑问，请咨询教务处杜老师，电话：67792064；邮箱：10015641@dhu.edu.cn。同时将已提交的截图发送至张老师的邮箱：snow@dhu.edu.cn。

五、项目咨询

国际合作处：张老师snow@dhu.edu.cn

项目执行：杨老师 15225360163（微信同号）

国际合作处

2022年6月10日