Просмотр исходного текста страницы МОВС Прикладная статистика (2022-23)

==О курсе==

Занятия проводятся в [https://yandex.zoom.us/j/95070562419 Zoom] '''по четвергам в 19:00'''

==Контакты==

Канал курса в TG: [[https://t.me/+-gZAC3ZfJo5hYjU6 channel link]]

Чат курса в TG: [[https://t.me/+Uaq7A5tiSrk2MGRi chat link]]

Преподаватель: Филипп Валерьевич Ульянкин

{| class="wikitable"
|-
! Ассистент !! Контакты 
|-
| style="background:#eaecf0;" | Лука Логинов || [https://t.me/l_loginov @l_loginov]
|-
| style="background:#eaecf0;" | Юлия Захарова || [https://t.me/myself_kinnie @myself_kinnie]
|-
| style="background:#eaecf0;" | Настя || [https://t.me/kadaobed @kadaobed]
|}

==Материалы курса==
Ссылка на плейлист курса на YouTube: [[https://www.youtube.com/playlist?list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC YouTube-playlist]]: первому занятию 2-го семестра соответствует видео 9.1 "Условное матожидание"

Ссылка на GitHub с материалами курса: [[https://github.com/FUlyankin/matstat-AB GitHub repository]]

Видеозаписи курса с Курсеры, слитые на Ютуб: [https://www.youtube.com/@user-bg8cd4fn7d/playlists click]

Курсы на платформе Вышки: [[https://edu.hse.ru/enrol/index.php?id=132492 1], [https://edu.hse.ru/course/view.php?id=132493 2], [https://edu.hse.ru/course/view.php?id=132488 3]]

'''Папка с конспектами: [https://drive.google.com/drive/folders/1k1u5iDa5Jc8ZaalBzxESr_9td5s5L3e-?usp=sharing GDrive]'''

{| class="wikitable"
|-
 ! Занятие !! Тема !! Дата !! Материалы для самоподготовки к семинарам !! Дополнительные материалы
|-
| style="background:#eaecf0;" | '''1''' [[https://www.youtube.com/watch?v=Zq8F-bTcdQo&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.1]], [[https://www.youtube.com/watch?v=37KCX3-gEXE&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.2]] || [[https://t.me/c/1622978742/69 Конспект]] Условное матожидание, рождение нормального распределение || 19.01.23 || || 
[https://bdemeshev.github.io/herschel-maxwell.html Обзорная статья про Хирша-Максвела] от Б.Б. Демешева, [https://bdemeshev.github.io/vernon_landon_normal_distribution.html Вывод НС от Вернона Лэндона], 

[https://github.com/olyagnilova/gauss-markov-pythagoras/blob/master/paper.pdf Статья про геометрию случайных величин, Б.Б. Демешев и Оля Гнилова], 

[https://www.youtube.com/watch?v=eoj686-ZLdE&list=PLlx2izuC9gjgEWu2364R6GnrY8SMUYi-E Видос Савватеева] про экспоненту как единственную функцию, связывающую сложение с умножением,

[https://github.com/FUlyankin/yet_another_matstat_course/blob/main/lectures_pdf/yamc_lec8.pdf Лекция про рождение распределения Пуассона]
|-
| style="background:#eaecf0;" | '''2''' [[https://www.youtube.com/watch?v=96rv6mVl_N8&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1622978742/72 Конспект]] Сходимость по вероятности, Закон больших чисел, метод моментов || 26.01.23 || 
[https://www.youtube.com/watch?v=LHNH5C_yG8E&list=PLCf-cQCe1FRyg1ajZ2HJVKknbuTujBOLN I половина 5-й недели из онлайн курса] (про ЗБЧ),

Видосы [https://www.youtube.com/watch?v=mGcffuwqBmg&list=PLCf-cQCe1FRwsRaleljSk-hdVe25DwTkU c теорией] и [https://www.youtube.com/watch?v=BH4fysrDME8&list=PLCf-cQCe1FRwsRaleljSk-hdVe25DwTkU с задачами] на 6-й неделе
|| 
[https://tvims.nsu.ru/chernova/tv/lec/lec.html Глава 11 (про ЗБЧ)] в Черновой, 

[https://www.probabilitycourse.com/chapter7/7_2_8_solved_probs.php Конспект] про сходимости случ. величин (с ручными задачками и их решениями),

[https://github.com/FUlyankin/matstat_lec/blob/main/several_pdfs/lecture06_converg.pdf Аналог конспекта выше] от Филиппа, [https://github.com/FUlyankin/matstat-AB/blob/main/week06_matstat_sh/moments.pdf Конспект про метод моментов], Ф. Ульянкин;

[https://github.com/FUlyankin/matstat-AB/tree/main/week05_LLN_CLT Тетрадки с симуляциями на Python],

[http://personal.psu.edu/drh20/asymp/fall2006/lectures/ Классные лекции] по асимптотическому терверу
|-
| style="background:#eaecf0;" | '''3''' [[https://www.youtube.com/watch?v=9vLWZynJq5E&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC&index=13 ч.1]], [[https://www.youtube.com/watch?v=jLYuqdYGSRs&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC&index=14 ч.2]] || [[https://t.me/c/1622978742/76 Конспект]] Сходимость по распределению, ЦПТ, асимптотические доверительные интервалы. Доказательство ЦПТ без характеристических функций || 02.02.23 || 
[https://github.com/FUlyankin/matstat-AB/tree/main/week05_LLN_CLT Тетрадки к неделе 5] по ЗБЧ//ЦПТ, [https://github.com/FUlyankin/matstat-AB/tree/main/week06_matstat_sh Тетрадки к неделе 6] по методу моментов и асимпт. доверит. интервалам;
||
[https://tvims.nsu.ru/chernova/tv/lec/node57.html#SECTION0001300 Глава 12 (про ЦПТ)] в Черновой;

[https://arxiv.org/abs/2106.00871 Статья с доказательством ЦПТ], [https://bdemeshev.github.io/probability_pro/clt_by_swapping.html Конспект док-ва от Б.Б. Демешева],

[https://tvims.nsu.ru/chernova/tv/lec/node63.html#SECTION0001400 Глава 13 Черновой] с кратким введением в характеристические функции и док-во ч/з них ЗБЧ//ЦПТ
|-
| style="background:#eaecf0;" | '''4''' [[https://www.youtube.com/watch?v=IMIpA-ThGlU&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1622978742/80 Конспект]] Свойства оценок и асимптотика || 09.02.23 || || [https://www.youtube.com/watch?v=arYqiJcyE2s&list=PLCf-cQCe1FRxdjkT1RjdmuFeco11U8ZIP Неделя про свойства оценок]
|-
| style="background:#eaecf0;" | '''5''' [[https://www.youtube.com/watch?v=LTlqyRI8cQ0&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.1], [https://www.youtube.com/watch?v=6Bcjc_0N_jw&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.2]] || [[https://t.me/c/1622978742/79 Конспект]] AB-тестирование и как его спланировать || 16.02.23 ||
[https://github.com/FUlyankin/yet_another_matstat_course/blob/main/notebooks/NPS_CI_simulation.ipynb Конспект] Филиппа про NPS, [https://github.com/FUlyankin/yet_another_matstat_course/blob/main/old_materials/sem04_errors_MDE_etc.ipynb Конспект] про планирование AB-теста и вывод формул, 

[https://github.com/FUlyankin/yet_another_matstat_course/blob/main/notebooks/means-hypotesis.pdf Конспект] про две процедуры и их сравнение
 || [https://github.com/FUlyankin/yet_another_matstat_course/blob/main/notebooks/AB_table.ipynb Код с пары], [https://www.youtube.com/watch?v=Zv-5gbJtofk&list=PLCf-cQCe1FRxTgNPwcRSkBjvtE8DEm7rU Неделя про проверку гипотез]
|-
| style="background:#eaecf0;" | '''6''' [[https://www.youtube.com/watch?v=VyLnV4qK8jU&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1677809213/3029 Конспект]] Точные критерии для проверки гипотез. Точные доверительные интервалы. Тест Уэлча || 02.03.23 || 
[https://www.youtube.com/watch?v=dJzRzeMdvbE&list=PLCf-cQCe1FRxoI9khulGS0cDaUNaSTa7A Неделя 8] про доверительные интервалы, 

[https://www.youtube.com/watch?v=Zv-5gbJtofk&list=PLCf-cQCe1FRxTgNPwcRSkBjvtE8DEm7rU Неделя 9] про гипотезы (подробнее про построение тестов, p-value, ошибки 1/2 рода) 
|| 
[https://github.com/FUlyankin/matstat-AB/blob/main/week08_confInt/ttest_2sample.pdf Файл] с выводом р-я Стьюдента для случая с неизвестными равными дисперсиями

[https://github.com/FUlyankin/matstat-AB/blob/main/week09_hypo/cheatsheet_param_stat.pdf Шпаргалка] по всем параметрическим тестам, [https://github.com/FUlyankin/matstat-AB/blob/main/week09_hypo/cheatsheet_param_stat.pdf много тетрадок] с простыми задачами на [https://github.com/FUlyankin/matstat-AB/tree/main/week08_confInt дов. интервалы]/[https://github.com/FUlyankin/matstat-AB/tree/main/week09_hypo гипотезы]

[https://tvims.nsu.ru/chernova/sibguti/ms-sibguti.pdf Глава 4 Черновой] про точные дов. интервалы, [https://www.youtube.com/watch?v=CwnkwI_5Gas&list=PLCf-cQCe1FRxoI9khulGS0cDaUNaSTa7A Видео] про то же

Глава 5 из Черновой про дов. интервалы для нормальных выборок, 

[https://sobopedia.azurewebsites.net/Exercises/Details?id=183 Задача] на точный дов. интервал для эксп. р-я

[https://www.stat.umn.edu/geyer/s06/5102/notes/ci.pdf Вывод асипт. р-я] для выборочной дисперсии
|-
| style="background:#eaecf0;" | '''7''' [[https://www.youtube.com/watch?v=0Rn6ImS0WK4&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1677809213/3038 Конспект]] Непараметрические критерии. Тест Манна-Уитни || 09.03.23 || || 
|-
| Конец третьего модуля |
|-
| style="background:#eaecf0;" | '''8''' [[https://www.youtube.com/watch?v=CjVNOeX-Ahk&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1622978742/94 Конспект], [https://t.me/c/1677809213/3606 Ноутбук]] Бутстрап || 13.04.23 || ||
|-
| style="background:#eaecf0;" | '''9''' [[https://www.youtube.com/watch?v=b3aivo0GJi8&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1622978742/97 Конспект]] Метод максимального правдоподобия || 20.04.23 || || 
|-
| style="background:#eaecf0;" | '''10''' [[https://www.youtube.com/watch?v=A1d-FLUWJZk&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1622978742/110 Конспект]] Линейная регрессия || 27.04.23  || || [https://books.econ.msu.ru/Introduction-to-Econometrics/ Хорошая книга] про линейную регрессию
|-
| style="background:#eaecf0;" | '''11''' [[https://www.youtube.com/watch?v=ln4Ktv27L7c&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC Запись]] || [[https://t.me/c/1677809213/3811 Конспект]] Продвинутые техники АБ-тестирования. CUPED, CUPAC || 11.05.23 || || [https://exp-platform.com/Documents/2013-02-CUPED-ImprovingSensitivityOfControlledExperiments.pdf Оригинальная статья про Cuped], [https://github.com/bdemeshev/cuped_statistician_viewpoint/blob/main/cuped_stat_viewpoint.pdf Взгляд на CUPED через линрег], [https://booking.ai/how-booking-com-increases-the-power-of-online-experiments-with-cuped-995d186fff1d Картинки про CUPED], [https://books.econ.msu.ru/Introduction-to-Econometrics/ 11 глава книги Картаева]
|-
| style="background:#eaecf0;" | '''12''' [[https://www.youtube.com/watch?v=i980TywUQOk&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.1], [https://www.youtube.com/watch?v=pgS9j_1PSgg&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.2], [https://www.youtube.com/watch?v=tegiHMkR1p0&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.3]] || [[https://t.me/c/1677809213/3811 Конспект]] Продвинутые техники АБ-тестирования. LATE, Мэтчинг. || 18.05.23 || || [http://quantile.ru/06/06-RE.pdf Обзорная статья] про мэтчинг, [https://habr.com/ru/companies/citymobil/articles/560426/ Статья от Сити-мобил] про свичбек, [https://books.econ.msu.ru/Introduction-to-Econometrics/chap11/11.3/ Глава про LATE] из книги Картаева, [https://proceedings.mlr.press/v67/gutierrez17a/gutierrez17a.pdf Туториал] по Uplift-моделированию, [https://matheusfacure.github.io/python-causality-handbook/01-Introduction-To-Causality.html Книга "Causal Inference for the Brave and True"] с мемами и питоном
|-
| style="background:#eaecf0;" | '''13''' [[https://www.youtube.com/watch?v=dPqpBAXVw7g&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.1], [https://www.youtube.com/watch?v=gHWe6-pfE0A&list=PLNKXA-74YGLjDOtDSZEFoy1yP-3AfiHUC ч.2]] || [[ Ноутбук]] Продуктовые подходы. Стратификация || 08.06.23 || || 
[https://vkteam.medium.com/practitioners-guide-to-statistical-tests-ed2d580ef04f#a429 Статья от VK] с симуляциями разных AB-тестов и ROC-AUC для них

Большая классная [https://arxiv.org/pdf/1803.06336.pdf статья про дельта метод] от Денга (автора CUPED), [https://alexdeng.github.io/ Список статей Денга]

[https://www.researchgate.net/publication/322969314_Consistent_Transformation_of_Ratio_Metrics_for_Efficient_Online_Controlled_Experiments Статья про линеаризацию] от Яндекса, вступление одного из авторов [https://www.youtube.com/watch?v=vIdwgJFz5Mk статьи Ильи Кацева]

[https://drive.google.com/file/d/1kR9M7arM3QlLQIUbaBriJBsWoNVlVkM1/view Преза про стратификацию]
|-
|}

==Формула оценивания==

Оценка = ''<strike>0.25*О<small>ДЗ-1</small> + 0.25*О<small>ДЗ-2</small> + 0.25*О<small>ДЗ-3</small> + 0.25*О<small>ДЗ-4</small></strike>''<br/>&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; = 0.333*О<sub>ДЗ-1</sub> + 0.333*О<sub>ДЗ-2</sub> + 0.334*О<sub>ДЗ-3</sub>

== Домашние задания ==
Инвайт в Энитаск: ''e1eQIU9''

=== Примерный план дедлайнов===
* ДЗ-1: 20 февраля - 20 марта
* ДЗ-2: 20 марта - 10 апреля
* ДЗ-3: 10 апреля - 14 мая
* <strike>ДЗ-4: 15 мая - 5 июня</strike>

=== Список заданий ===
# [[https://github.com/FUlyankin/yet_another_matstat_course/blob/main/hw_matstat/yam_hw01-hakuna_matata.ipynb Симуляции]], [[https://github.com/FUlyankin/yet_another_matstat_course/blob/main/hw_matstat/yam_hw01-hakuna_matata_tasks.pdf Задачи]] | Выдано 27.02.23 | '''Дедлайн - '''<strike>26.03.23</strike> '''02.04.23 23:59 МСК'''--- (Недели 1, 2 и 5 курса "Прикладная статистика" ощутимо помогут выполнить это дз)
# [[https://github.com/FUlyankin/yet_another_matstat_course/blob/main/hw_matstat/yam_hw02-boots_rap.ipynb Ноутбук]] | Выдано 23.04.23 | '''Дедлайн - 14.05.23'''
# [[https://github.com/FUlyankin/yet_another_matstat_course/blob/main/hw_matstat/hw03_A-B%20test_results.ipynb Ноутбук]] | Выдано 24.05.23 | '''Дедлайн - 11.06.23'''

== Литература ==
# Чернова, Н.И., 2003. Лекции по математической статистике. Новосибирск: НГУ.
# Pilon, C.D., 2015. Probabilistic programming and Bayesian methods for hackers.
# Hunter, D.R., 2006. Statistics 553: asymptotic tools. Lecture Notes.

* Лагутин, М.Б., 2012. Наглядная математическая статистика. Учебное пособие. БИНОМ. Лаборатория знаний.
* Matloff, N.S., 2009. From algorithms to Z-Scores: Probabilistic and statistical modeling in computer science. Gainesville: University Press of Florida.