Генеративные модели в машинном обучении (ИИ 2024)
Содержание
О курсе
Курс читается на первом модуле студентам магистерской образовательной программы "Искусственный интеллект".
Канал и чат курса в ТГ: Чат
| Группа | Преподаватели | Zoom | Время |
|---|---|---|---|
| Базовая | Ершов Глеб | Zoom | суббота 13:00 + вторник 17.09 18:10 |
| Продвинутая | Гущин Михаил | Zoom | четверг 18:10 + среда 25.09 18:10 |
| Ассистенты |
|---|
| Прохоров Савелий |
| Охотин Даниил |
| Никифорова Соня-Аня |
| Кураторы |
|---|
| Залесинский Роман |
| Зуев Гордей |
Материалы курса
Ссылка на плейлист курса на VK: VK-playlist
Ссылка на GitHub с материалами курса: GitHub
Ссылка на stepik: Stepik
| Занятие | Тема | Материалы для самоподготовки к семинарам | Материалы семинаров | Дополнительные материалы |
|---|---|---|---|---|
| 1 | Трансформеры | Модули 10 и 11 на Stepik | [Тетрадка] [Colab] [Запись_продвинутая] | [Статья1] [Статья2] [Статья3] |
| 2 | Архитектуры трансформеров | Модули 10, 11 и 12 на Stepik | [Colab] | - |
| 3 | Генеративно-состязательные сети (GANs) | Модуль 15.1 на Stepik | - | - |
| 4 | Вариационные автокодировщики (VAEs) и нормализующие потоки (Normalizing Flows) | Модули 14 и 15.3 на Stepik | - | - |
| 5 | Диффузионные модели | Модуль 15 на Stepik | - | - |
| 6 | Мультимодальные модели | Модуль 15 на Stepik | - | - |
| 7 | Синтез речи (Text-to-Speech) | - | - | - |
| 8 | Оптимизация моделей | Модуль 16 на Stepik | - | - |
Формула оценивания
Общая оценка: 0.5*OДЗ + 0.15*ОТесты + 0.25*ОЭкз. + 0.1*ОStepik
Экзамен, как и все прочие формы контроля, не блокирующий. Сколько накопили до экзамена, столько (после математического округления) можем ставить в итог за курс.
Домашние задания
Инвайт в Anytask: UZppWJ0 (проверить)
Задание 1. Трансформеры
Вам предстоит дообучить трансформер на своих данных.
Дедлайн: 04 марта 2024 года 23:59
Ссылка: (ссылка)
Задание 2. Генеративные модели
Вам предстоит обучить генеративную модель на своих данных.
Дедлайн: 01 апреля 2024 года 23:59
Ссылка: (ссылка)
Задание 3. Мультимодельные модели
Вам предстоит разобраться с мультимодальностью.
Дедлайн: 01 апреля 2024 года 23:59
Ссылка: (ссылка)
Тесты и неоцениваемые теоретические ДЗ (ТУДУ)
- "Attention, Transformers": ссылка, дедлайн -- 14.09 (Сб.), 23:59 МСК
Экзамен (ТУДУ)
...
Литература
Курсы по машинному обучению и анализу данных
- Основы глубинного обучения, ВШЭ
- Глубинное обучение, ВШЭ
- Глубинное обучение 1, МФТИ
- Глубинное обучение 2, МФТИ
- Онлайн-учебник по машинному обучению от ШАД
- Курс по машинному обучению К.В. Воронцова
