教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出

又有机会跟着大神学习了! 今年 2 月起,何恺明已经开始了自己在 MIT 的副教授职业生涯,并在 3 月 7 日走上讲台完成了「人生中教的第一堂课」。 近日,我们发现了何恺明的第二门课程《深度生成模型》(6.S978: Deep Generative Models),已经于 9 月初开始了授课。

又有机会跟着大神学习了!

今年 2 月起,何恺明已经开始了自己在 MIT 的副教授职业生涯,并在 3 月 7 日走上讲台完成了「人生中教的第一堂课」。

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出

近日,我们发现了何恺明的第二门课程《深度生成模型》(6.S978: Deep Generative Models),已经于 9 月初开始了授课。

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出

在何恺明担任讲师之外,MIT CSAIL 计算设计与制造团队(Computational Design & Fabrication Group)的四年级博士生 Minghao Guo 担任助教。

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出

这门课程被热心网友推荐给准备教授计算机视觉与深度学习的人作为参考。

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出

网友感慨何恺明是残差网络(ResNet)的发明者,非常厉害。不过能具备这门课程先修知识的人应该很少。看来,课程的难度较高,需要较为扎实的学习背景。

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出

课程概览

据介绍,这是一门研讨会课程,目标受众是正在进行(或计划进行)深度生成模型研究的研究生(graduate)

课程介绍了深度生成模型的概念、原理和应用,主要涵盖了计算机视觉(如图像、视频、几何)和相关领域(如机器人技术、生物学、材料科学等)中的场景。课程侧重于不同问题和学科之间共享的通用范式和方法。

核心主题包括变分自编码器、自回归模型、生成对抗网络、扩散模型及其应用,覆盖了基础框架和最新研究前沿。

课程分为讲师讲座、客座讲座和学生研讨会。学生研讨会包括了论文阅读、演示和讨论。当然了,课程对学生的要求非常高,包括如下:

  • 参加所有讲座和研讨会

  • 每两周完成一次习题集

  • 在研讨会上发表一篇论文:20 分钟演示 + 10 分钟讨论和 QA

  • 完成最终项目和项目演示

  • ……

课程共分为 15 周完成,除了第 1 周和最后一周,每周各有两节课(分别为阅读课和讲座)。目前,课程已经进行到了第 10 周,主题分别如下:

  • Week 1:深度生成模型简介

  • Week 2:建模图像先验、变分自编码器(VAE)

  • Week 3:归一化流、自回归(AR)模型

  • Week 4:自回归(AR)模型、AR 和分词器(tokenizer)

  • Week 5:AR 和扩散、生成对抗网络(GAN)

  • Week 6:扩散领域的 GAN

  • Week 7:基于能量的模型、分数匹配和扩散模型

  • Week 8:扩散模型、去噪后的扩散

  • Week 9:离散扩散、流匹配 1

  • Week 10:流匹配 2、CMU 助理教授朱俊彦讲座《确保生成模型的数据所有权》(Ensuring Data Ownership in Generative Models)

其中前 5 期讲座的 PPT 已经放出来了。

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出                                  地址:https://mit-6s978.github.io/assets/pdfs/lec1_intro.pdf

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出                                地址:https://mit-6s978.github.io/assets/pdfs/lec2_vae.pdf

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出                                    地址:https://mit-6s978.github.io/assets/pdfs/lec3_ar.pdf

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出                                   地址:https://mit-6s978.github.io/assets/pdfs/lec4_gan.pdf

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出                                    地址:https://mit-6s978.github.io/assets/pdfs/lec5_diffusion.pdf

更详细的课程计划参考下图,接下来的主题将包括:视频、3D、几何、机器人、材料科学、蛋白质和生物学等领域的应用。此外还有 OpenAI 战略探索团队负责人宋飏的讲座《一致性模型》(Consistency Models)

教授何恺明在MIT的第二门课——《深度生成模型》,讲座PPT陆续已出

课程地址:https://mit-6s978.github.io/

相关资讯

大神回归学界:何恺明宣布加入 MIT

何恺明的目标是:探索面向复杂世界的智能。

教授何恺明在MIT的第一堂课

700 座的大教室,相比去年增加一倍容量,仍然座无虚席:这就是麻省理工学院(MIT)计算机视觉课《Advances in Computer Vision》6.8300 在 2024 新学期的盛况。今年是四位教授,每人负责一部分课程:课程信息:,能选上这课的学生太幸运了,每节都是计算机视觉顶会 CVPR Oral 的体验。对于很多人来说,其中最为期待的自然是新晋教授何恺明的课。MIT 电气工程与计算机科学系副教授何恺明(Kaiming He)在 3 月 7 日走上讲台上完成了自己「人生中教的第一堂课」。据参与现场的同

2022 IBM博士生奖学金揭晓:8位华人入选,上交大、电子科大校友在列

这些获奖博士生将赢得高达 9.5 万美元的奖金。