Глубинное обучение (АДД 2025) — различия между версиями
Mhushchyn (обсуждение | вклад) |
Mhushchyn (обсуждение | вклад) |
||
| (не показаны 3 промежуточные версии этого же участника) | |||
| Строка 17: | Строка 17: | ||
Лектор: [https://www.hse.ru/org/persons/213369348 Михаил Гущин] (mhushchyn@hse.ru, @mhushchyn) | Лектор: [https://www.hse.ru/org/persons/213369348 Михаил Гущин] (mhushchyn@hse.ru, @mhushchyn) | ||
| − | Лекции проходят по вторникам в 18:10 ( | + | Лекции проходят по вторникам в 18:10 (D504). |
=== Семинары === | === Семинары === | ||
| Строка 23: | Строка 23: | ||
Семинарист: [https://www.hse.ru/org/persons/190918370 Азиз Темирханов] (atemirkhanov@hse.ru, @MrDredD) | Семинарист: [https://www.hse.ru/org/persons/190918370 Азиз Темирханов] (atemirkhanov@hse.ru, @MrDredD) | ||
| − | Семинары проходят по вторникам в 19:40 ( | + | Семинары проходят по вторникам в 19:40 (D504). |
=== Учебные ассистенты === | === Учебные ассистенты === | ||
| Строка 45: | Строка 45: | ||
Округление арифметическое. | Округление арифметическое. | ||
| + | |||
| + | === Правила выставления автомата === | ||
| + | |||
| + | O<sub>автомат</sub> = Округление((0.5 * ДЗ + 0.2 * КР) / 0.7) | ||
| + | |||
| + | Критерий такой: за Среднее ДЗ >= 6 и за КР >= 6. | ||
| + | |||
| + | Если критерий выполняется, то на экзамен можно не приходить. | ||
=== Правила сдачи заданий === | === Правила сдачи заданий === | ||
| Строка 79: | Строка 87: | ||
'''Лекция 12.''' Рекуррентные нейронные сети. LSTM. GRU. [[https://github.com/hushchyn-mikhail/deep_learning_dad/blob/main/2025/lectures/lecture12-rnn.pdf Слайды]] | '''Лекция 12.''' Рекуррентные нейронные сети. LSTM. GRU. [[https://github.com/hushchyn-mikhail/deep_learning_dad/blob/main/2025/lectures/lecture12-rnn.pdf Слайды]] | ||
| + | |||
| + | '''Лекция 13.''' Машинный перевод. Seq2seq. [[https://github.com/hushchyn-mikhail/deep_learning_dad/blob/main/2025/lectures/lecture13-seq2seq.pdf Слайды]] | ||
| + | |||
| + | '''Лекция 14.''' Механизмы внимания (attention). [[https://github.com/hushchyn-mikhail/deep_learning_dad/blob/main/2025/lectures/lecture14-attention.pdf Слайды]] | ||
| + | |||
| + | '''Лекция 15.''' Трансформеры. [[https://github.com/hushchyn-mikhail/deep_learning_dad/blob/main/2025/lectures/lecture15-transformers.pdf Слайды]] | ||
== Семинары == | == Семинары == | ||
| Строка 105: | Строка 119: | ||
[https://github.com/hse-ds/iad-deep-learning/blob/master/2023/iad-dl-midterm-var02.pdf Нулевой вариант 2] | [https://github.com/hse-ds/iad-deep-learning/blob/master/2023/iad-dl-midterm-var02.pdf Нулевой вариант 2] | ||
| − | В варианте будет 4 | + | В варианте будет 4-5 вопросов. Обратите внимание на примеры типовых задач в списке вопросов. |
==Экзамен== | ==Экзамен== | ||
| + | |||
| + | Экзамен состоится 17 июня во время лекции (18:10 - 19:30). | ||
| + | |||
| + | [https://docs.google.com/document/d/1jXsSyDzqOb0Y-Eq60_Sdq7UTnD7S4n2oFUmrGRyXPHs/edit?usp=sharing Вопросы для подготовки] | ||
| + | |||
| + | [https://github.com/hse-ds/iad-deep-learning/blob/master/2023/iad-dl-midterm-var0.pdf Нулевой вариант 1] | ||
| + | |||
| + | [https://github.com/hse-ds/iad-deep-learning/blob/master/2023/iad-dl-midterm-var02.pdf Нулевой вариант 2] | ||
| + | |||
== Материалы прошлых лет == | == Материалы прошлых лет == | ||
Текущая версия на 18:14, 3 июня 2025
Содержание
О курсе
Курс читается для студентов 1 курса магистерской программы "Анализ данных в девелопменте" в 3-4 модулях.
Репозиторий с материалами курса на GitHub.
[Анонимная форма обратной связи]
[Таблица с оценками]
Лекции
Лектор: Михаил Гущин (mhushchyn@hse.ru, @mhushchyn)
Лекции проходят по вторникам в 18:10 (D504).
Семинары
Семинарист: Азиз Темирханов (atemirkhanov@hse.ru, @MrDredD)
Семинары проходят по вторникам в 19:40 (D504).
Учебные ассистенты
Правила выставления оценок
В курсе предусмотрено несколько форм контроля знаний:
- Практические домашние работы на Python или с теоретическими задачами
- Контрольная работа в середине курса
- Письменный экзамен
Итоговая оценка вычисляется на основе оценки за работу в семестре и оценки за экзамен:
Oитоговая = Округление(0.5 * ДЗ + 0.2 * КР + 0.3 * Э)
ДЗ — средняя оценка за практические домашние задания
КР — оценка за контрольную работу
Э — оценка за экзамен
Округление арифметическое.
Правила выставления автомата
Oавтомат = Округление((0.5 * ДЗ + 0.2 * КР) / 0.7)
Критерий такой: за Среднее ДЗ >= 6 и за КР >= 6.
Если критерий выполняется, то на экзамен можно не приходить.
Правила сдачи заданий
За каждый день просрочки после мягкого дедлайна снимается 1 балл. После жёсткого дедлайна работы не принимаются. Даже при опоздании на одну секунду. Сдавайте заранее.
При обнаружении плагиата оценки за домашнее задание обнуляются всем задействованным в списывании студентам, а также подаётся докладная записка в деканат. Следует помнить, что при повторном списывании деканат имеет право отчислить студента.
При наличии уважительной причины пропущенную проверочную можно написать позднее, а дедлайн по домашнему заданию может быть перенесён. Дедлайн по домашнему заданию переносится на количество дней, равное продолжительности уважительной причины. Решение о том, является ли причина уважительной, принимает исключительно учебный офис.
Лекции
Лекция 1. Введение в глубинное обучение. [Слайды]
Лекция 2. Полносвязные нейронные сети. [Слайды]
Лекция 3. Обучение нейронных сетей. [Слайды]
Лекция 4. Регуляризация. Dropout. Batch Normalization. Автокодировщики. [Слайды]
Лекция 5. Изображения. Операция свёртки. [Слайды]
Лекция 6. Свёрточные нейронные сети. Интерпретация моделей. [Слайды]
Лекция 7. Архитектуры свёрточных нейронных сетей. [Слайды]
Лекция 8. Перенос обучения. Распознавание лиц. [Слайды]
Лекция 9. Детектирование объектов. [Слайды]
Лекция 10. Сегментация изображений. [Слайды]
Лекция 11. Векторное представление текста, word2vec. [Слайды]
Лекция 12. Рекуррентные нейронные сети. LSTM. GRU. [Слайды]
Лекция 13. Машинный перевод. Seq2seq. [Слайды]
Лекция 14. Механизмы внимания (attention). [Слайды]
Лекция 15. Трансформеры. [Слайды]
Семинары
Семинар 1. Введение в глубинное обучение.
Практические задания
После дедлайна работы не принимаются.
Задание 1. Обучение полносвязных сетей
Вам предстоит обучить несколько полносвязных сетей на нескольких датасетах.
Дедлайн: 24 февраля 2025 года 23:59
Ссылка: https://github.com/hushchyn-mikhail/deep_learning_dad/blob/main/2025/homeworks/HomeWork-1.ipynb
Промежуточная контрольная работа
Промежуточная контрольная работа состоится 15 апреля во время лекции (18:10 - 19:30).
В варианте будет 4-5 вопросов. Обратите внимание на примеры типовых задач в списке вопросов.
Экзамен
Экзамен состоится 17 июня во время лекции (18:10 - 19:30).
Материалы прошлых лет
Дополнительные материалы
Курсы по машинному обучению и анализу данных
- Основы глубинного обучения, ВШЭ
- Глубинное обучение, ВШЭ
- Глубинное обучение 1, МФТИ
- Глубинное обучение 2, МФТИ
- Онлайн-учебник по машинному обучению от ШАД
- Курс по машинному обучению К.В. Воронцова
