机器学习基础

研讨会

基本信息

讲座:星期三16:00至18:00,地点:MPI-INF大楼E1 4 024室
协调员:江永刚,库尔特·梅尔霍恩,亚当·波拉克,鲁哈尼·夏尔马,汉斯·西蒙,史莱亚斯·斯里尼瓦斯
第一堂课:4月12日
类型研讨会
信用:7
考试:没有考试
注册:请加入邮件列表:https://lists.mpi-inf.mpg.de/listinfo/ml-foundations网站
LSF注册截止日期将于4月26日宣布
前提条件:基本的数学流利性很重要。你一定会写校样。精通基本微积分、线性代数和概率非常有用。这本书的附录涵盖了一些基本思想。 

描述

课程力学:本课程以阅读小组的形式组织,通过阅读和讨论本书向学生介绍机器学习的理论基础Mehryar Mohri、Afshin Rostamizadeh和Amee Talwalkar的“机器学习基础”本课程将分为两部分:讲座和以学生为中心的演示。

在前三周,课程协调员将根据书的前四章进行讲课。讲座将涵盖PAC学习模型、VC-Dimension和Rademacher复杂性等概念以及正则化(第1-4章)。

在接下来的几周里,本课程将侧重于以学生为中心的演示。每周,我们将尝试涵盖第5、6、7、8、9、10、11和15章中的一章。随机选择的两名学生将介绍每一章,根据注册学生的数量,协调员可能会介绍一些章节。上课前,要求学生阅读指定的章节。如果您在理解为即将到来的会议指定的阅读材料时遇到困难,请尽快联系一位或多位组织者。也鼓励在课程邮件列表上提问。 

您应该做什么:请阅读材料,并准备就会议主题进行长达45分钟的白板演示。典型的演示将激发一些定义,描述我们试图证明的关键结果,并解释如何证明它们,然后描述关键要点。鼓励提供概念概述。从第一周开始,下节课要读的章节将在课堂上宣布。我们不期望演讲非常精彩。此外,你可以假设你的观众熟悉内容,如果你在某个地方遇到困难,你也可以提供帮助。我们毕竟在一起学习这个话题。关键是你要尽最大努力理解内容,如果有不清楚的地方,你可以自己讨论,或者问协调员。 

本课程不是什么:这不是一门我们学习如何实现机器学习算法的课程。从这个意义上讲,它不同于机器学习的入门课程。在这里,我们关注学习算法的数学模型,并获得其预测能力和复杂性度量(通常是样本复杂性)的可证明保证。我们不介绍神经网络和深度学习理论理解方面的最新进展。

校园其他相关课程:ML是一个巨大的主题,我们不可能希望它是全面的,涵盖它的每一个方面。我们的重点仅限于计算方面,尤其是理论方面。如果你想了解其他主题和方面,本学期校园里还开设了许多其他课程。以下几乎可以肯定是一个不完整的列表:


地铁列车时刻表

讲座讲师主题参考(见下文)位置
4月12日亚当·波拉克简介和PAC学习第1章和第2章(主要是第2章)E1 4024
4月19日亚当·波拉克、汉斯·西蒙有限和无限假设类的PAC学习第2章和第3章E1 4024
4月26日汉斯·西蒙无限假设类的PAC学习、假设选择简介和ERM第3.3、3.4、4.1和4.2章E1 4024
5月3日史莱亚斯·斯里尼瓦斯型号选择第4章E1 4024
5月10日Georgi Vitanov、Yonggang Jiang支持向量机第5章E1 5005号
5月17日乔治·维塔诺夫,汉斯·西蒙内核方法第6章E1 4024
5月24日库尔特·梅尔霍恩助推第7章E1 4024
5月31日亚当·波拉克在线学习第8章E1 4024
6月7日Adam Polak、Yonggang Jiang在线学习、排名第8章和第10章E1 4024
6月14日乔治·维塔诺夫回归第11章

E1 4,
021

6月21日汉斯·西蒙算法稳定性第14章第124页
6月28日乔治·维塔诺夫降维第十五章E1 4024
7月5日什里亚斯·斯里尼瓦斯学习自动机和语言第16章E1 4024
7月19日江永刚强化学习第17章第124页

工具书类