Прикладные задачи анализа данных/2022 — различия между версиями

Материал из Wiki - Факультет компьютерных наук
Перейти к: навигация, поиск
м
м (Dopopova переименовал страницу Прикладные задачи анализа данных в Прикладные задачи анализа данных/2022 поверх перенаправления)
 
(не показаны 72 промежуточные версии 14 участников)
Строка 5: Строка 5:
 
Проводится с 2016 года.
 
Проводится с 2016 года.
  
−
Лекции проходят по четвергам в 11:10 по [https://zoom.us/j/93056986920?pwd=WFpCbVR1R1Q3S1Q3QTlOMzBNN0Y5QT09 ссылке].
+
Лекции проходят по четвергам в 11:10 по [https://zoom.us/j/98428571734?pwd=dlNSWUNzdXZMcTYyMkZuNEd0UGZSUT09 ссылке].
  
 
=== Полезные ссылки ===
 
=== Полезные ссылки ===
  
−
[https://www.hse.ru/edu/courses/416017381 Карточка курса и программа]
+
[https://www.hse.ru/edu/courses/346231542 Карточка курса и программа]
  
 
[https://github.com/hse-ds/iad-applied-ds Репозиторий с материалами на GitHub]
 
[https://github.com/hse-ds/iad-applied-ds Репозиторий с материалами на GitHub]
Строка 15: Строка 15:
 
Почта для сдачи домашних заданий (на самом деле задания сдаются в AnyTask, но если он не работает, то присылайте на почту): hse.minor.dm+<номер группы>@gmail.com (например, hse.minor.dm+3@gmail.com)
 
Почта для сдачи домашних заданий (на самом деле задания сдаются в AnyTask, но если он не работает, то присылайте на почту): hse.minor.dm+<номер группы>@gmail.com (например, hse.minor.dm+3@gmail.com)
  
−
Канал в telegram для объявлений: https://t.me/hse_minor_intro_dm_2
+
Канал в telegram для объявлений: https://t.me/hs_iad_2021
  
−
Чат в telegram (осторожно, риск флуда и отсутствия ответов на содержательные вопросы): https://t.me/iad_flood
+
Чат в telegram (осторожно, риск флуда и отсутствия ответов на содержательные вопросы): https://t.me/+Vuq4Lgi98RG22fQP
  
−
Ссылка на курс в Anytask: https://anytask.org/course/787
+
Ссылка на курс в Anytask: https://anytask.org/course/926
  
−
Таблица с оценками:
+
Таблица с оценками: https://docs.google.com/spreadsheets/d/1ldHwaK38SdeLVJh0h-RUSRf4bgRjBPdhS9J73AASJb0/edit?usp=sharing
 +
 
 +
Распределение студентов по проверяющим ассистентам: https://docs.google.com/spreadsheets/d/14FP82sGnpMYG-WFOFKL_CtDVRDuuCJGVUVlLTDVvWLQ/edit?usp=sharing
  
 
=== Семинары ===
 
=== Семинары ===
Строка 27: Строка 29:
 
{| class="wikitable"
 
{| class="wikitable"
 
|-
 
|-
−
! Группа !! Преподаватель !! Учебный ассистент !! Zoom-конференция !! Ссылка на чат !! Материалы семинаров !! Инвайт в anytask
+
! Группа !! Преподаватель !! Учебный ассистент !! Zoom-конференция !! Ссылка на чат !! Инвайт в anytask
 
|-
 
|-
−
| ИАД-1 || Ковалёв Алексей  || Вертеева Алена || [https://zoom.us/j/98767276421?pwd=M2NPRndVSXlxWDY0bEhGdjROWkNkZz09 Zoom] || [https://t.me/joinchat/GMRWqmCHJoeIHSTp Чат] || || AclUusP
+
| ИАД-1 || [https://t.me/waytobehigh Васильковский Михаил] || Добротворский Николай, Григорян Михаил || [https://zoom.us/j/94018277859?pwd=Vy9YT244VWx5emJiN0xFTU1WSU1Gdz09 Zoom] || [https://t.me/+cIX4NC6fCCZlZmUy Чат] || sF8bn01
 
|-  
 
|-  
−
| ИАД-2 || Гущин Михаил || Пащенко Анатолий || [https://zoom.us/j/91897611953?pwd=U1ExSTlhZGlzcWJZSUh6NnpXN0lQdz09 Zoom] || [https://t.me/joinchat/F9wK5Ia-9MccXHXp Чат] || || 1nkqLLM
+
| ИАД-2 || [https://t.me/AlexeyKKovalev Ковалёв Алексей] || [https://t.me/egorkapiorka Егор Масликов], Григорян Михаил || [https://zoom.us/j/93403367570?pwd=TnRwZnhGcTBKdG95RFRmaDZFSjBQZz09 Zoom] || [https://t.me/+EJCLcBpN0J0yM2My Чат] || vP3Pgs7
 
|-
 
|-
−
| ИАД-3 || Чесаков Даниил  || Ревина Полина || [https://zoom.us/j/94956280541?pwd=KzJrZzlUUDJ0Rnc0dTZIbjZlNjdzZz09 Zoom] || [https://t.me/joinchat/ES5w2w4fersnpdf0UWoMNw Чат]|| https://github.com/Danyache/minor2021-iad3-spring || xAWTEmD
+
| ИАД-3 || [https://t.me/Kirili4ik Гельван Кирилл] || [https://t.me/egorkapiorka Егор Масликов], [https://t.me/poly_nomial Анищенко Илья], Матяш Дарья || [https://zoom.us/j/92093885020?pwd=ejdNZU9lUGxRMngyUUQ2My9ZWmpldz09 Zoom] || [https://t.me/+kQ-hh3YdUbc4YmMy Чат] || T5EoC7f
 
|-
 
|-
−
| ИАД-4 || Кузнецов Максим || Саночкин Юрий || [https://zoom.us/j/95689153191?pwd=REp2R1hKcmFXRk9CTUxxRTFjRjFZUT09 Zoom] || [https://t.me/joinchat/HdCek9Q8tps_Ahnd Чат] || https://yadi.sk/d/51onIvR2Kgfh3w?w=1 || gsf6Xv2
+
| ИАД-4 || [https://t.me/mikhail_h91 Гущин Михаил] || Матяш Дарья, Пономаренко Александр, Довгополый Иоанн || [https://zoom.us/j/98994201201?pwd=anJxZk8rZ0FMZUpVMXBYY2NDcU1PQT09 Zoom] || [https://t.me/+T3cFdHw3Zk8xYTYy Чат] || WGxLiR3
 
|-
 
|-
−
| ИАД-5 || Гущин Михаил || Шикунов Николай || [https://zoom.us/j/92054171282?pwd=NXB3aHlMQlJ1dmpwN1EzQlNOenRzdz09 Zoom] || [https://t.me/joinchat/IsEjn93CrYbSbUyM Чат] || || Ksh1OIm
+
| ИАД-5 || [https://t.me/asukhareva Анжела Сухорева] || Довгополый Иоанн, [https://t.me/treaptofun Барышников Антон], Фадеев Егор || [https://zoom.us/j/92443725208?pwd=QldGSkloQXFBN2htUDh0bGVvMDM1dz09 Zoom] || [https://t.me/+XaWQfMaUEjExNWRi Чат] || MNMUy1Y
 
|-
 
|-
−
| ИАД-6 || Кантонистова Елена || Цю-жен-цин Дмитрий  || [https://zoom.us/j/97661977158?pwd=c2o1MFY5UlprR1VJcUduY29CNGkvZz09 Zoom] || [https://t.me/joinchat/H3aY7JBpdGQuk-qd Чат] || || PHWSB7H
+
| ИАД-6 || [https://t.me/murr4a Кантонистова Елена] || Фадеев Егор, Тамогашев Кирилл || [https://zoom.us/j/98871876800?pwd=TlhFeGQvdmhiVDJFNlRaUmRvOVlYUT09 Zoom] || [https://t.me/+e9ZUPY6NwmxmOTcy Чат] || YMo2fg2
 +
|-
 +
| ИАД-7 || [https://t.me/topshik Антон Семенкин] || Тамогашев Кирилл, Никифоров Михаил, Аверьянов Николай || [https://zoom.us/j/97127332891?pwd=V1JVUjQzZ1FHU3ByOWh1ckZ6SFVLUT09 Zoom] || [https://t.me/+grlMEWqfzdozZjdi Чат] || SWhHMzu
 
|}
 
|}
  
Строка 64: Строка 68:
  
 
За каждый день просрочки после мягкого дедлайна снимается 1 балл. После жёсткого дедлайна работы не принимаются. Даже при опоздании на одну секунду. Сдавайте заранее.
 
За каждый день просрочки после мягкого дедлайна снимается 1 балл. После жёсткого дедлайна работы не принимаются. Даже при опоздании на одну секунду. Сдавайте заранее.
 +
 +
Два раза студент может сдать домашнее задание после мягкого дедлайна (но до жёсткого) без штрафов. Также разрешается в конце курса написать одну проверочную, пропущенную без уважительной причины.
  
 
При обнаружении плагиата оценки за домашнее задание обнуляются всем задействованным в списывании студентам, а также подаётся докладная записка в деканат. Следует помнить, что при повторном списывании деканат имеет право отчислить студента.
 
При обнаружении плагиата оценки за домашнее задание обнуляются всем задействованным в списывании студентам, а также подаётся докладная записка в деканат. Следует помнить, что при повторном списывании деканат имеет право отчислить студента.
Строка 71: Строка 77:
 
== Лекции ==
 
== Лекции ==
  
−
'''Лекция 1''' (28.01.2021). Задачи порождения изображений. Perceptual loss. Перенос стиля. Superresolution. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/lectures/lecture01-generative.pdf Слайды]] [[https://www.youtube.com/watch?v=GRJ84i2z_7A Запись лекции]]
+
'''Лекция 1''' (20.01.2022). Задачи порождения изображений. Perceptual loss. Перенос стиля. Superresolution. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture01-generative.pdf Слайды]] [[https://youtu.be/mWj74otAcvA Запись лекции]]
  
−
'''Лекция 2''' (04.02.2021). Вариационные автокодировщики. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/lectures/lecture02-vae.pdf Слайды]] [[https://www.youtube.com/watch?v=cBL7jS4GQRk Запись лекции]]
+
'''Лекция 2''' (27.01.2022). Вариационные Автокодировщики. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture02-vae.pdf Слайды]] [[https://youtu.be/Bxjd4J37sHw Запись лекции]]
  
−
'''Лекция 3''' (11.02.2021). Генеративно-состязательные сети. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/lectures/lecture03-gan.pdf Слайды]] [[https://youtu.be/lUNCZlM5SYY Запись лекции]]
+
'''Лекция 3''' (03.02.2022). Генеративно-состязательные сети. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture03-gan.pdf Слайды]] [[https://youtu.be/W4YrX7PMUTI Запись лекции]]
  
−
'''Лекция 4''' (18.02.2021). Нормализационные потоки. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/lectures/lecture04-nf.pdf Слайды]] [[https://www.youtube.com/watch?v=gpv7kf1bf-U Запись лекции]]
+
'''Лекция 4''' (10.02.2022). Нормализационные потоки. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture04-nf.pdf Слайды]] [[https://youtu.be/1WYXIGsD_5M Запись лекции]]
  
−
'''Лекция 5''' (25.02.2021). Диалоговые и вопросно-ответные системы. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/lectures/lecture05.pdf Слайды]] [[https://youtu.be/TmVIGWzaq5A Запись лекции]]
+
'''Лекция 5''' (10.02.2022). Глубинное обучение для обработки звука. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture05-Intro%20to%20DSP.pdf Слайды]] [[https://youtu.be/VAcHjPcO_k4 Запись лекции]]
  
−
'''Лекция 6''' (04.03.2021). DL для звука 1. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/lectures/lecture06.pdf Слайды]] [[https://youtu.be/m4Ve26DNNyM Запись лекции]]
+
'''Лекция 6''' (03.03.2022). Синтез речи, TTS. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture06-TTS.pdf Конспект]] [[https://youtu.be/3_bnmZxfdiE Запись лекции]]
  
−
'''Лекция 7''' (11.03.2021). DL для звука 2. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/lectures/lecture07.pdf Слайды]] [[https://youtu.be/Rc9qUb7kdkQ Запись лекции]]
+
'''Лекция 7''' (10.03.2022). Анализ временных рядов. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture07-ts.pdf Конспект]] [[https://youtu.be/kV6GptrBhO8 Запись лекции]]
 +
 
 +
'''Лекция 8''' (17.03.2022). Анализ временных рядов. Продолжение. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture08-ts_2.pdf Выкладки с лекции]] [[https://youtu.be/XpCWb9pgwK0 Запись лекции]]
 +
 
 +
'''Лекция 9''' (24.03.2022). Современные методы обработки языка. NLP. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture09-NLP.pptx Презентация с лекции]] [[https://github.com/hse-ds/iad-applied-ds/tree/master/2022/lectures/lecture09-NLP_desc дополнительные выкладки]] [[https://youtu.be/1_FBy0bgN7E Запись лекции]]
 +
 
 +
'''Лекция 10''' (10.04.2022). Рекомендательные системы. Ранжирование. Метрики ранжирования [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture10-ranking.pdf Конспект]] [[https://youtu.be/7TsmXAPVoPE Запись лекции]]
 +
 
 +
'''Лекция 10.2''' (20.04.2022, ''асинхронно''). Рекомендательные системы 2 [[https://www.youtube.com/watch?v=jXq7z6z1RNM Запись 1 (от 18.03.2021)]] [[https://youtu.be/HOcP_1kLOOs Запись 2 (от 25.03.2021)]] [[https://github.com/esokolov/ml-course-hse/blob/master/2020-spring/lecture-notes/lecture23-recommender.pdf Конспект]]
 +
 
 +
'''Лекция 11''' (21.04.2022). A/B тестирование. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture11-12-AB_tests.pdf Презентация с лекции]] [[https://youtu.be/iWg6HYYu5WM Запись лекции]]
 +
 
 +
'''Лекция 12''' (28.04.2022). A/B тестирование. Продолжение. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture11-12-AB_tests.pdf Презентация с лекции]] [[https://youtu.be/_5pFlCrb7yw Запись лекции]]
 +
 
 +
'''Лекция 13''' (12.05.2022). Поиск аномалий. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/lectures/lecture13-anomaly_(notes).pdf Конспект]] [[https://youtu.be/dxy_sxj27u4 Запись лекции]]
 +
 
 +
'''Лекция 14''' (02.06.2022). 3D Vision [[https://docs.google.com/presentation/d/1UDLHwqsPs-dIcmLEZ6er7Uhau5V_Kf1SkXsllCm3JHk/edit?usp=sharing Презентация с лекции]] [[https://youtu.be/7GPU8tq-gtc Запись лекции]]
  
 
== Семинары ==
 
== Семинары ==
  
−
'''Семинар 1''' (04.02.2021). Трансформация изображений. [[https://github.com/hse-ds/iad-applied-ds/tree/master/2021/seminars Тетрадка]]
+
'''Семинар 1''' (27.01.2022). Задачи порождения изображений. Perceptual loss. Перенос стиля. Superresolution. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem01/sem01-neural-style.ipynb Тетрадка]] [[https://colab.research.google.com/github/hse-ds/iad-applied-ds/blob/master/2022/seminars/Sem1_neural_style.ipynb Colab]]
  
−
'''Семинар 2''' (11.02.2021). Вариационные автокодировщики. [[https://github.com/hse-ds/iad-applied-ds/tree/master/2021/seminars/sem02_ae_vae Тетрадка]]
+
'''Семинар 2''' (03.02.2022). Автокодировщики. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem02/sem02-autoencoders-task.ipynb Тетрадка]] [[https://colab.research.google.com/github/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem02/sem02-autoencoders-task.ipynb Colab]]
  
−
'''Семинар 3''' (18.02.2021). Генеративно-состязательные сети. [[https://colab.research.google.com/github/hse-ds/iad-applied-ds/blob/master/2021/seminars/sem03_gan.ipynb Тетрадка]]
+
'''Семинар 3''' (10.02.2022). Генеративно-состязательные сети. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem03/sem03-gan-task.ipynb Тетрадка]] [[https://colab.research.google.com/github/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem03/sem03-gan-task.ipynb Colab]]
  
−
'''Семинар 4''' (25.02.2021). Нормализационные потоки. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/seminars/sem04_nf.ipynb Тетрадка]]
+
'''Семинар 4''' (17.02.2022). Нормализационные потоки. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem04.ipynb Тетрадка]] [[https://colab.research.google.com/drive/1PCiSQWo_h2XK0XUlj-Oks5_P3JeV_7Ze?usp=sharing Colab]]
  
−
'''Семинар 5''' (04.03.2021). NER и лингвомодели. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/seminars/sem05_NER.ipynb Тетрадка]]
+
'''Семинар 5''' (24.02.2022). Обработка звука 1. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem05/sem05_audio.ipynb Тетрадка]] [[https://colab.research.google.com/drive/1G97XqNom5n2TCqCB7SmLkYoQ9GKGv0XK?usp=sharing Colab]]
  
−
'''Семинар 6''' (11.03.2021). Распознавание речи. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/seminars/sem06_audio.ipynb Тетрадка]]
+
'''Семинар 6''' (03.03.2022). Обработка звука 2. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem06.ipynb Тетрадка]] [[https://colab.research.google.com/drive/1YDBP32BIlBPVlfQFQOXzlJSbghb2KwuH?usp=sharing Colab]]
 +
 
 +
'''Семинар 7''' (17.03.2022). Временные ряды. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem07/sem07_timeseries.ipynb Тетрадка]]
 +
 
 +
'''Семинар 8''' (24.03.2022). Временные ряды 2. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem08/sem08_timeseries2_sol.ipynb Тетрадка]]
 +
 
 +
'''Семинар 9''' (31.03.2022). NER. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem09.ipynb Тетрадка]]
 +
 
 +
'''Семинар 11''' (21.04.2022). Рекомендательные системы 2. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem11/sem11_ncf_sol.ipynb Тетрадка]]
 +
 
 +
'''Семинар 12''' (28.04.2022). Случайные величины и нормальное распределение. Проверка гипотез. A/B тестирование. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem12/sem12_stat_solved.ipynb Тетрадка]]
 +
 
 +
'''Семинар 13''' (12.05.2022). Идея статистического вывода. Сравнение средних и t-тест. Хи-квадрат. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem13/sem13_stat2_solved.ipynb Тетрадка]]
 +
 
 +
'''Семинар 14''' (26.05.2022). Anomaly Detection. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem14/sem14_anomaly_sol.ipynb Тетрадка]]
 +
 
 +
'''Семинар 15''' (09.06.2022). 3D Vision. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2022/seminars/sem15/sem15_simple_nerf_tutorial.ipynb Тетрадка]]
  
−
'''Семинар 7''' (18.03.2021). Генерация звука. [[https://github.com/hse-ds/iad-applied-ds/blob/master/2021/seminars/sem07_audio_gen.ipynb Тетрадка]]
 
 
== Практические задания ==
 
== Практические задания ==
  
−
За каждый день просрочки после мягкого дедлайна снимается 1 балл. После жёсткого дедлайна работы не принимаются, но есть исключение. В течение семестра каждый студент может не более 2 раз сдать задание после жёсткого дедлайна — в этом случае за каждый день просрочки продолжает вычитаться по одному баллу (если не оговорено иное).
+
За каждый день просрочки после мягкого дедлайна снимается 1 балл. После жёсткого дедлайна работы не принимаются, но есть исключение. Студенту разрешается два раза сдать домашнее задание после мягкого дедлайна (но до жёсткого) без штрафов.
  
 
===Задание 1. Генеративные модели===
 
===Задание 1. Генеративные модели===
 
Вам предстоит применить генеративно-состязательные сети и вариационный автокодировщик для быстрой симуляции параметров изображений системы двух черенковских телескопов MAGIC (Major Atmospheric Gamma Imaging Cherenkov).
 
Вам предстоит применить генеративно-состязательные сети и вариационный автокодировщик для быстрой симуляции параметров изображений системы двух черенковских телескопов MAGIC (Major Atmospheric Gamma Imaging Cherenkov).
  
−
'''Мягкий дедлайн''':  11 марта 2021 года 23:59
+
'''Мягкий дедлайн''':  03 марта 2022 года 23:59
  
−
'''Дедлайн''':  14 марта 2021 года 23:59
+
'''Дедлайн''':  06 марта 2022 года 23:59
  
−
'''Ссылка''': https://github.com/hse-ds/iad-applied-ds/tree/master/2021/hw/hw1
+
'''Ссылка''': https://github.com/hse-ds/iad-applied-ds/blob/master/2022/hw/hw1
  
 
===Задание 2. Deep learning для обработки звука===
 
===Задание 2. Deep learning для обработки звука===
 
В этом задании Вы поработаете и разберетесь в деталях с форматами представления аудиоданных в задачах глубинного обучения, а так же напишете несколько моделей для классификации аудиозаписей.
 
В этом задании Вы поработаете и разберетесь в деталях с форматами представления аудиоданных в задачах глубинного обучения, а так же напишете несколько моделей для классификации аудиозаписей.
  
−
В процессе выполнения Вы познакомитесь:
+
'''Мягкий дедлайн''': 23:30 1 апреля
−
* С алгоритмом построения Мел-спектрограммы.
+
−
* Рекуррентными и сверточными классификаторами аудиоданных.
+
−
* Алгоритмом аугментации аудиоданных SpecAugment.
+
  
−
'''Мягкий дедлайн''':  8 апреля 2021 года 23:59
+
'''Дедлайн''':  23:30 4 апреля
  
−
'''Дедлайн''': 11 апреля 2021 года 23:59
+
'''Ссылка''': https://github.com/hse-ds/iad-applied-ds/tree/master/2022/hw/hw2
  
−
'''Ссылка''': https://github.com/hse-ds/iad-applied-ds/tree/master/2021/hw/hw2
+
===Задание 3. Прогнозирование временных рядов===
 +
В этом задании Вам предстоит разобраться с основами анализа и прогнозирования временных рядов.
 +
 
 +
'''Мягкий дедлайн''':  24 апреля в 23:59
 +
 
 +
'''Дедлайн''':  28 апреля 23:59
 +
 
 +
'''Ссылка''': https://github.com/hse-ds/iad-applied-ds/blob/master/2022/hw/HW3.ipynb
 +
 
 +
===Задание 4. Рекомендательные системы===
 +
В этом задании Вы продолжите работать с данными из семинара Articles Sharing and Reading from CI&T Deskdrop.
 +
 
 +
'''Мягкий дедлайн''':  25 мая в 23:59
 +
 
 +
'''Дедлайн''':  1 июня 23:59
 +
 
 +
'''Ссылка''': https://github.com/hse-ds/iad-applied-ds/blob/master/2022/hw/hw4/HW4.ipynb
  
 
== Контрольная работа ==
 
== Контрольная работа ==
 +
Вопросы для подготовки: [https://docs.google.com/document/d/1J79w346FayH8ZfJQ8RZXddJ8RKwtzGoi6X8BlSKZe2E/edit GoogleDoc]
 +
 +
Контрольная пройдет '''19 мая''' на второй паре ('''11:10 - 12:30''')
 +
 +
Нужно включить видео в Zoom (''приоритет -- рукам''), демонстрацию всего рабочего стола. Решения пишем ручкой на пустых листах бумаги или на планшете (его должно быть видно целиком).
 +
 +
На загрузку решений предусмотрены дополнительные 10 мин. '''После 12:40''' (+ возможная задержка начала) '''работы не принимаются'''
  
 
== Экзамен ==
 
== Экзамен ==
 +
Вопросы для подготовки: [https://docs.google.com/document/d/12MFhZOrnDw0AGfNVzgzUoCD_EH5yPaKq2J7B6kB63xY/edit?usp=sharing GoogleDoc]
 +
 +
'''23 июня (четверг) в 11:00''' пишем экзамен. Он будет длиться ''2 часа (120 минут)'', все будет в зуме, правила действуют такие же, как и на контрольной.
  
 
== Страницы прошлых лет ==
 
== Страницы прошлых лет ==
 +
 +
[[Прикладные_задачи_анализа_данных/2020_2021 | 2020/21 учебный год ]]
  
 
[[Прикладные задачи анализа данных (майнор ИАД) | 2019/20 учебный год ]]
 
[[Прикладные задачи анализа данных (майнор ИАД) | 2019/20 учебный год ]]

Текущая версия на 22:13, 28 января 2023

О курсе

Курс читается для студентов 3-го курса майнора ИАД в 3-4 модулях.

Проводится с 2016 года.

Лекции проходят по четвергам в 11:10 по ссылке.

Полезные ссылки

Карточка курса и программа

Репозиторий с материалами на GitHub

Почта для сдачи домашних заданий (на самом деле задания сдаются в AnyTask, но если он не работает, то присылайте на почту): hse.minor.dm+<номер группы>@gmail.com (например, hse.minor.dm+3@gmail.com)

Канал в telegram для объявлений: https://t.me/hs_iad_2021

Чат в telegram (осторожно, риск флуда и отсутствия ответов на содержательные вопросы): https://t.me/+Vuq4Lgi98RG22fQP

Ссылка на курс в Anytask: https://anytask.org/course/926

Таблица с оценками: https://docs.google.com/spreadsheets/d/1ldHwaK38SdeLVJh0h-RUSRf4bgRjBPdhS9J73AASJb0/edit?usp=sharing

Распределение студентов по проверяющим ассистентам: https://docs.google.com/spreadsheets/d/14FP82sGnpMYG-WFOFKL_CtDVRDuuCJGVUVlLTDVvWLQ/edit?usp=sharing

Семинары

Группа Преподаватель Учебный ассистент Zoom-конференция Ссылка на чат Инвайт в anytask
ИАД-1 Васильковский Михаил Добротворский Николай, Григорян Михаил Zoom Чат sF8bn01
ИАД-2 Ковалёв Алексей Егор Масликов, Григорян Михаил Zoom Чат vP3Pgs7
ИАД-3 Гельван Кирилл Егор Масликов, Анищенко Илья, Матяш Дарья Zoom Чат T5EoC7f
ИАД-4 Гущин Михаил Матяш Дарья, Пономаренко Александр, Довгополый Иоанн Zoom Чат WGxLiR3
ИАД-5 Анжела Сухорева Довгополый Иоанн, Барышников Антон, Фадеев Егор Zoom Чат MNMUy1Y
ИАД-6 Кантонистова Елена Фадеев Егор, Тамогашев Кирилл Zoom Чат YMo2fg2
ИАД-7 Антон Семенкин Тамогашев Кирилл, Никифоров Михаил, Аверьянов Николай Zoom Чат SWhHMzu

Правила выставления оценок

В курсе предусмотрено несколько форм контроля знания:

  • Практические домашние работы на Python
  • Контрольная где-то в середине курса
  • Письменный экзамен

Итоговая оценка вычисляется по формуле:

Округление(0.5 * ДЗ + 0.2 * КР + 0.3 * Э)

ДЗ — средняя оценка за практические домашние задания

КР — оценка за контрольную работу

Э — оценка за экзамен

Итоговое округление арифметическое.

Правила сдачи заданий

За каждый день просрочки после мягкого дедлайна снимается 1 балл. После жёсткого дедлайна работы не принимаются. Даже при опоздании на одну секунду. Сдавайте заранее.

Два раза студент может сдать домашнее задание после мягкого дедлайна (но до жёсткого) без штрафов. Также разрешается в конце курса написать одну проверочную, пропущенную без уважительной причины.

При обнаружении плагиата оценки за домашнее задание обнуляются всем задействованным в списывании студентам, а также подаётся докладная записка в деканат. Следует помнить, что при повторном списывании деканат имеет право отчислить студента.

При наличии уважительной причины пропущенную проверочную можно написать позднее, а дедлайн по домашнему заданию может быть перенесён. Дедлайн по домашнему заданию переносится на количество дней, равное продолжительности уважительной причины. Решение о том, является ли причина уважительной, принимает исключительно учебный офис.

Лекции

Лекция 1 (20.01.2022). Задачи порождения изображений. Perceptual loss. Перенос стиля. Superresolution. [Слайды] [Запись лекции]

Лекция 2 (27.01.2022). Вариационные Автокодировщики. [Слайды] [Запись лекции]

Лекция 3 (03.02.2022). Генеративно-состязательные сети. [Слайды] [Запись лекции]

Лекция 4 (10.02.2022). Нормализационные потоки. [Слайды] [Запись лекции]

Лекция 5 (10.02.2022). Глубинное обучение для обработки звука. [Слайды] [Запись лекции]

Лекция 6 (03.03.2022). Синтез речи, TTS. [Конспект] [Запись лекции]

Лекция 7 (10.03.2022). Анализ временных рядов. [Конспект] [Запись лекции]

Лекция 8 (17.03.2022). Анализ временных рядов. Продолжение. [Выкладки с лекции] [Запись лекции]

Лекция 9 (24.03.2022). Современные методы обработки языка. NLP. [Презентация с лекции] [дополнительные выкладки] [Запись лекции]

Лекция 10 (10.04.2022). Рекомендательные системы. Ранжирование. Метрики ранжирования [Конспект] [Запись лекции]

Лекция 10.2 (20.04.2022, асинхронно). Рекомендательные системы 2 [Запись 1 (от 18.03.2021)] [Запись 2 (от 25.03.2021)] [Конспект]

Лекция 11 (21.04.2022). A/B тестирование. [Презентация с лекции] [Запись лекции]

Лекция 12 (28.04.2022). A/B тестирование. Продолжение. [Презентация с лекции] [Запись лекции]

Лекция 13 (12.05.2022). Поиск аномалий. [Конспект] [Запись лекции]

Лекция 14 (02.06.2022). 3D Vision [Презентация с лекции] [Запись лекции]

Семинары

Семинар 1 (27.01.2022). Задачи порождения изображений. Perceptual loss. Перенос стиля. Superresolution. [Тетрадка] [Colab]

Семинар 2 (03.02.2022). Автокодировщики. [Тетрадка] [Colab]

Семинар 3 (10.02.2022). Генеративно-состязательные сети. [Тетрадка] [Colab]

Семинар 4 (17.02.2022). Нормализационные потоки. [Тетрадка] [Colab]

Семинар 5 (24.02.2022). Обработка звука 1. [Тетрадка] [Colab]

Семинар 6 (03.03.2022). Обработка звука 2. [Тетрадка] [Colab]

Семинар 7 (17.03.2022). Временные ряды. [Тетрадка]

Семинар 8 (24.03.2022). Временные ряды 2. [Тетрадка]

Семинар 9 (31.03.2022). NER. [Тетрадка]

Семинар 11 (21.04.2022). Рекомендательные системы 2. [Тетрадка]

Семинар 12 (28.04.2022). Случайные величины и нормальное распределение. Проверка гипотез. A/B тестирование. [Тетрадка]

Семинар 13 (12.05.2022). Идея статистического вывода. Сравнение средних и t-тест. Хи-квадрат. [Тетрадка]

Семинар 14 (26.05.2022). Anomaly Detection. [Тетрадка]

Семинар 15 (09.06.2022). 3D Vision. [Тетрадка]

Практические задания

За каждый день просрочки после мягкого дедлайна снимается 1 балл. После жёсткого дедлайна работы не принимаются, но есть исключение. Студенту разрешается два раза сдать домашнее задание после мягкого дедлайна (но до жёсткого) без штрафов.

Задание 1. Генеративные модели

Вам предстоит применить генеративно-состязательные сети и вариационный автокодировщик для быстрой симуляции параметров изображений системы двух черенковских телескопов MAGIC (Major Atmospheric Gamma Imaging Cherenkov).

Мягкий дедлайн: 03 марта 2022 года 23:59

Дедлайн: 06 марта 2022 года 23:59

Ссылка: https://github.com/hse-ds/iad-applied-ds/blob/master/2022/hw/hw1

Задание 2. Deep learning для обработки звука

В этом задании Вы поработаете и разберетесь в деталях с форматами представления аудиоданных в задачах глубинного обучения, а так же напишете несколько моделей для классификации аудиозаписей.

Мягкий дедлайн: 23:30 1 апреля

Дедлайн: 23:30 4 апреля

Ссылка: https://github.com/hse-ds/iad-applied-ds/tree/master/2022/hw/hw2

Задание 3. Прогнозирование временных рядов

В этом задании Вам предстоит разобраться с основами анализа и прогнозирования временных рядов.

Мягкий дедлайн: 24 апреля в 23:59

Дедлайн: 28 апреля 23:59

Ссылка: https://github.com/hse-ds/iad-applied-ds/blob/master/2022/hw/HW3.ipynb

Задание 4. Рекомендательные системы

В этом задании Вы продолжите работать с данными из семинара Articles Sharing and Reading from CI&T Deskdrop.

Мягкий дедлайн: 25 мая в 23:59

Дедлайн: 1 июня 23:59

Ссылка: https://github.com/hse-ds/iad-applied-ds/blob/master/2022/hw/hw4/HW4.ipynb

Контрольная работа

Вопросы для подготовки: GoogleDoc

Контрольная пройдет 19 мая на второй паре (11:10 - 12:30)

Нужно включить видео в Zoom (приоритет -- рукам), демонстрацию всего рабочего стола. Решения пишем ручкой на пустых листах бумаги или на планшете (его должно быть видно целиком).

На загрузку решений предусмотрены дополнительные 10 мин. После 12:40 (+ возможная задержка начала) работы не принимаются

Экзамен

Вопросы для подготовки: GoogleDoc

23 июня (четверг) в 11:00 пишем экзамен. Он будет длиться 2 часа (120 минут), все будет в зуме, правила действуют такие же, как и на контрольной.

Страницы прошлых лет

2020/21 учебный год

2019/20 учебный год

2018/19 учебный год

2017/18 учебный год

2016/17 учебный год

Источник — «http://wiki.cs.hse.ru/index.php?title=Прикладные_задачи_анализа_данных/2022&oldid=76023»