О курсе
Курс читается в первом семестре студентам магистерской образовательной программы "Искусственный интеллект".
Канал и чат курса в ТГ: Чат
Материалы курса
Ссылка на плейлист курса на VK: [ VK-playlist]
Ссылка на GitHub с материалами курса: GitHub
Ссылка на stepik: Stepik
| Расписание базовой группы |
|
| Занятие |
Тема |
Материалы для самоподготовки к семинарам |
Материалы семинаров |
Дополнительные материалы
|
| 1 |
Трансформеры |
Модули 10 и 11 на Stepik |
Тетрадка, Colab, Запись_продвинутая |
Запись лекции про Attention и трансформеры на ИАДе, Слайды к ней; Attention is All You Need; The Illustrated Transformer; Visualizing Attention, a Transformer's Heart;
|
| 2 |
Архитектуры трансформеров |
Модули 10, 11 и 12 на Stepik |
Тетрадка, Colab, Запись продвинутая |
Кратко про BERT, GPT и T5 модели; The Illustrated BERT, ELMo, and co.;
|
| 3 |
Генеративно-состязательные сети (GANs) |
Модули 14.1 и 15.1 на Stepik |
Слайды, Лекция, Семинар, Ноутбук |
Лекция ПЗАД по GAN и слайды; туториал по DCGAN от torch; оригинальная статья Яна Гудфеллоу; Wiki ИТМО; глава из учебника Яндекса
|
| 4 |
Вариационные автокодировщики (VAEs) и нормализующие потоки (Normalizing Flows) |
Модули 14 и 15.3 на Stepik |
Слайды, Запись лекции, Семинарский ноутбук, Запись семинара |
Лекция ПЗАД по NF и слайды; глава учебника Яндекса про VAE, обзор NVAE, реализация NVAE, реализация VAE на Habr; глава учебника Яндекса по NF, заметки о различных архитектурах NF, репозиторий с реализациями архитектур NF
|
| 5 |
Диффузионные модели |
Модуль 15 на Stepik |
Запись лекции, Слайды, Тетрадка с семинара, Запись семинара |
Лекция ПЗАД по диффузиям и слайды; глава в учебнике Яндекса, курс HuggingFace, заметки о генерации видео, описание создания e2e модели генерации видео от Яндекса, репозиторий с материалами по диффузиям
|
| 6 |
Мультимодальные модели |
Модуль 15 на Stepik |
Запись лекции, Слайды, Семинарский ноутбук, Запись семинара |
семинар от Сбера про различные мультимодальные архитектуры, статья про CLIP от OpenAI, туториал по ViT на HuggingFace
|
| 7 |
Синтез речи (Text-to-Speech) |
- |
Запись лекции, Слайды, Семинарский ноутбук, Запись семинара |
Wiki ИТМО, туториал HuggingFace, верхнеуровневый обзор технологий синтеза речи от Sber, репозиторий курса DLA
|
| 8 |
Оптимизация моделей |
Модуль 16 на Stepik |
Запись лекции, Слайды, Семинарский ноутбук, Запись семинара |
Про дистилляцию знаний, Про квантизацию (Хабр), Про pruning (pytorch) и калибровку
|
Формула оценивания
Общая оценка: 0.6*ДЗ + 0.1*степик + 0.1*теормин + 0.2*Экз
Экзамен, как и все прочие формы контроля, не блокирующий. Сколько накопили до экзамена, столько (после математического округления) можем ставить в итог за курс.
Stepik
В оценку за Stepik идут только следующие модули:
Важно: Части степика с домашними заданиями делать не нужно (15.4, например). Но нужно ответить на квизы в других его частях (15.1, например).
Домашние задания
Экзамен
Вопросы к экзамену: Google Doc
Пробный вариант: ссылка на сообщение с pdf в чате курса
Пройдет 23.10 (Ср.) в 19:00
На написание 80 мин. (одна пара), 10 мин. на загрузку заданий в Энитаск
В Зуме нужно будет включить веб-камеру, выключить микрофон и запустить демонстрацию экрана.
За написанием будут следить преподаватели и ассистенты
От 4-х до 6-ти задач на разное количество баллов (в сумме -- 10)
