Глубинное обучение 1 — различия между версиями
Материал из Wiki - Факультет компьютерных наук
(цшз) |
(wip) |
||
| Строка 8: | Строка 8: | ||
==Контакты== | ==Контакты== | ||
| − | + | Канал и чат курса в TG: [https://t.me/+wudNpSb5vmkxMmVi channel link] | |
| − | + | Преподаватели: Садртдинов Ильдус Рустемович, Гущин Михаил Иванович | |
{| class="wikitable" | {| class="wikitable" | ||
| Строка 16: | Строка 16: | ||
! Ассистенты !! Контакты | ! Ассистенты !! Контакты | ||
|- | |- | ||
| − | | style="background:#eaecf0;" | | + | | style="background:#eaecf0;" | Акимов Тимур || [https://t.me/takimov @takimov] |
|- | |- | ||
| − | | style="background:#eaecf0;" | | + | | style="background:#eaecf0;" | Казюлина Марина || [https://t.me/poemgranate @poemgranate] |
|- | |- | ||
| − | | style="background:#eaecf0;" | | + | | style="background:#eaecf0;" | Никифоров Михаил || [https://t.me/caesiummm @caesiummm] |
| + | |- | ||
| + | | style="background:#eaecf0;" | Жирков Фёдор || [https://t.me/ko4osik @ko4osik] | ||
| + | |- | ||
| + | | style="background:#eaecf0;" | Лазарева Анна || [https://t.me/annalzrv @annalzrv] | ||
| + | |} | ||
| + | |||
| + | {| class="wikitable" | ||
| + | |- | ||
| + | ! Кураторы !! Контакты | ||
| + | |- | ||
| + | | style="background:#eaecf0;" | Залесинский Роман || [https://t.me/roman_zalesinskii @roman_zalesinskii ] | ||
| + | |- | ||
| + | | style="background:#eaecf0;" | Герасимова Мария || [https://t.me/mariya_math @mariya_math] | ||
|} | |} | ||
Версия 21:42, 22 апреля 2024
Содержание
О курсе
Занятия проходят по субботам.
У базовой группы с 11:10 по 12:30 по ссылке Zoom.
У продвинутой группы с 13:00 по 14:20 по ссылке Zoom.
Контакты
Канал и чат курса в TG: channel link
Преподаватели: Садртдинов Ильдус Рустемович, Гущин Михаил Иванович
| Ассистенты | Контакты |
|---|---|
| Акимов Тимур | @takimov |
| Казюлина Марина | @poemgranate |
| Никифоров Михаил | @caesiummm |
| Жирков Фёдор | @ko4osik |
| Лазарева Анна | @annalzrv |
| Кураторы | Контакты |
|---|---|
| Залесинский Роман | @roman_zalesinskii |
| Герасимова Мария | @mariya_math |
Материалы курса
Ссылка на плейлист курса на YouTube: [...]
Ссылка на курс на Stepik: [... Stepik]
Ссылка на GitHub с материалами курса: GitHub (ПМИ)
Ссылка на GDrive c заполненными семинарскими ноутбуками: GDrive
| Занятие | Тема | Дата | Материалы для самоподготовки к семинарам | Дополнительные материалы |
|---|---|---|---|---|
| 1 [Запись] | [Ноутбук] Полносвязные нейронные сети | дата |
Лекции Е. Соколова с ИАДа: 1 и 2 (до свёрток) или/и Лекция Ильдуса про полносвязные нейросети. Почитать можно раздел 5 "Введение в глубинное обучение" в учебнике ШАДа |
|
| 2 [Запись] | [Ноутбук] Полносвязные нейронные сети (продолжение) | ... | Лекция "Оптимизации нейронных сетей" | |
| 3 [Запись] | [Ноутбук] Свёрточные нейронные сети | ... |
Лекции Е. Соколова: 1 (с 54:30) и 2 или/и Лекция Ильдуса (с 40:50) |
|
| 4 [Запись] | [Ноутбук] Свёрточные нейронные сети (продолжение) | ... | Лекция Ильдуса, Лекции Е. Соколова: [1] (с 46:00) и [2] (до 53:30) | Данные к семинару |
| 5 [Запись] | Ноутбук Сегментация и детекция | ... | Лекции Соколова [1] (с 53:50) и [2], Лекция Ильдуса | |
| 6 [Запись] | [Ноутбук] Нейросетевые векторные представления слов | ... | Лекция c ИАДа (читает Антон Семенкин), Лекция Ильдуса | |
| 7 [Запись] | [Ноутбук] Рекуррентные нейронные сети, LSTM, архитектура Decoder-Encoder | ... | Лекция Е. Соколова, Лекция Ильдуса | Данные к первой части семинара |
| 8 [Запись] | [Папка с ноутбуком, скриптами и данными] Дистилляция, квантизация, прунинг | ... | Лекция (Ильдус) | |
| 9 [Запись] | [Ноутбук] Трансформеры 1 | ... | Лекция (Алексей Биршерт) | Статьи "The Illustrated Transformer" и Visualizing A Neural Machine Translation Model (Mechanics of Seq2seq Models With Attention), Jay Alammar |
Формула оценивания
Оценка = 0.15*ОStepik + 0.25*Оэкзамен + 0.6*ОДЗ
Домашние задания
Инвайт в Anytask: ...
- Полносвязные нейронные сети
Часть 1 "Автоматическое дифференцирование" (5 бонусных баллов)| [Материалы]
Часть 2 "Полносвязные нейронные сети" (основная, 10 баллов) | [Ноутбук]
Дедлайн: ... - Свёрточные нейронные сети | [Ноутбук] | Дедлайн: ...
- Рекуррентные нейронные сети | Языковые модели (RNN, LSTM) | Дедлайн: ...
Тесты и неоцениваемые теоретические ДЗ
Возможны изменения в числе тестов в большую сторону
- "Полносвязные нейронные сети. Введение в pytorch", выдан 27.04.23, дедлайн - ...
- "Сверточные нейронные сети", выдан 26.06.23, дедлайн - ...
- Векторные представления текстов. RNN, LSTM, выдан 09.06.23, дедлайн - ...
- Трансформеры и BERT, дедлайн - ...
- Теоретическое ДЗ-1 "Полносвязные НС" (не оценивается)
Экзамен
...
Литература
- Гудфеллоу Я. − Глубокое обучение
- Christopher M. Bishop - Pattern Recognition and Machine Learning
- Стивенс Э. - PyTorch. Освещая глубокое обучение
