Генеративные модели в машинном обучении (ИИ 2025)

О курсе

Курс читается в первом семестре студентам магистерской образовательной программы "Искусственный интеллект".

Канал и чат курса в ТГ: Чат

Группа	Преподаватели	Zoom	Время
Базовая	Тихонова Мария, Кантонистова Елена	[ Zoom]
Продвинутая	Карагодин Никита	[ Zoom]

Ассистенты
Прохоров Савелий
Охотин Даниил
Никифорова Соня-Аня

Материалы курса

Ссылка на плейлист курса на VK: [ VK-playlist]

Ссылка на GitHub с материалами курса: GitHub

Ссылка на stepik: Stepik

Расписание базовой группы
Занятие	Тема	Материалы для самоподготовки к семинарам	Материалы семинаров	Дополнительные материалы
1	Трансформеры	Модули 10 и 11 на Stepik	Тетрадка, Colab, Запись_продвинутая	Запись лекции про Attention и трансформеры на ИАДе, Слайды к ней; Attention is All You Need; The Illustrated Transformer; Visualizing Attention, a Transformer's Heart;
2	Архитектуры трансформеров	Модули 10, 11 и 12 на Stepik	Тетрадка, Colab, Запись продвинутая	Кратко про BERT, GPT и T5 модели; The Illustrated BERT, ELMo, and co.;
3	Генеративно-состязательные сети (GANs)	Модули 14.1 и 15.1 на Stepik	Слайды, Лекция, Семинар, Ноутбук	Лекция ПЗАД по GAN и слайды; туториал по DCGAN от torch; оригинальная статья Яна Гудфеллоу; Wiki ИТМО; глава из учебника Яндекса
4	Вариационные автокодировщики (VAEs) и нормализующие потоки (Normalizing Flows)	Модули 14 и 15.3 на Stepik	Слайды, Запись лекции, Семинарский ноутбук, Запись семинара	Лекция ПЗАД по NF и слайды; глава учебника Яндекса про VAE, обзор NVAE, реализация NVAE, реализация VAE на Habr; глава учебника Яндекса по NF, заметки о различных архитектурах NF, репозиторий с реализациями архитектур NF
5	Диффузионные модели	Модуль 15 на Stepik	Запись лекции, Слайды, Тетрадка с семинара, Запись семинара	Лекция ПЗАД по диффузиям и слайды; глава в учебнике Яндекса, курс HuggingFace, заметки о генерации видео, описание создания e2e модели генерации видео от Яндекса, репозиторий с материалами по диффузиям
6	Мультимодальные модели	Модуль 15 на Stepik	Запись лекции, Слайды, Семинарский ноутбук, Запись семинара	семинар от Сбера про различные мультимодальные архитектуры, статья про CLIP от OpenAI, туториал по ViT на HuggingFace
7	Синтез речи (Text-to-Speech)	-	Запись лекции, Слайды, Семинарский ноутбук, Запись семинара	Wiki ИТМО, туториал HuggingFace, верхнеуровневый обзор технологий синтеза речи от Sber, репозиторий курса DLA
8	Оптимизация моделей	Модуль 16 на Stepik	Запись лекции, Слайды, Семинарский ноутбук, Запись семинара	Про дистилляцию знаний, Про квантизацию (Хабр), Про pruning (pytorch) и калибровку

Формула оценивания

Общая оценка: 0.6*ДЗ + 0.1*степик + 0.1*теормин + 0.2*Экз

Экзамен, как и все прочие формы контроля, не блокирующий. Сколько накопили до экзамена, столько (после математического округления) можем ставить в итог за курс.

Stepik

В оценку за Stepik идут только следующие модули:

• Модуль 10 Attention

• Модуль 11 Трансформеры: теория

• Модуль 12 Трансформеры: практика

• Модуль 14 Классические генеративные модели

• Модуль 15 Современные генеративные модели

• Модуль 16 Методы оптимизации нейронных сетей

Важно: Части степика с домашними заданиями делать не нужно (15.4, например). Но нужно ответить на квизы в других его частях (15.1, например).

Экзамен

Вопросы к экзамену: Google Doc

Пробный вариант: ссылка на сообщение с pdf в чате курса

Пройдет 23.10 (Ср.) в 19:00
На написание 80 мин. (одна пара), 10 мин. на загрузку заданий в Энитаск
В Зуме нужно будет включить веб-камеру, выключить микрофон и запустить демонстрацию экрана.
За написанием будут следить преподаватели и ассистенты
От 4-х до 6-ти задач на разное количество баллов (в сумме -- 10)