Теория и практика онлайн-экспериментов 23/24
Содержание
О курсе
Курс читается для студентов 4-го курса ПМИ ФКН ВШЭ в 3 модуле.
Лектор: Багиян Нерсес Карленович
Семинарист: Попов Даниил Викторович
Ассистент: Романко Елизавета Константиновна
Полезные ссылки
Таблица с оценками: Канал в telegram для объявлений: тык
Группа в telegram для обсуждения: тык2
Anytask: тык3, инвайт: IsHG1V4
Github с материалами: тык4
Консультации
Консультации с преподавателями и учебными ассистентами (если иное не оговорено на странице семинаров конкретной группы) по курсу проводятся по предварительной договорённости ввиду невостребованности регулярных консультаций.
При необходимости, можно писать в Telegram.
Правила выставления оценок
В курсе предусмотрено несколько форм контроля знания:
- Контрольная работа (4-5 задач на 1 ч 20 мин) в очном формате или в онлайн для студентов не из Москве
- 4 домашних задания.
- Письменный экзамен (4-5 задач на 1 ч 20 мин) с прокторингом (включенная камера на которой видно студента, экран записывается)
Итоговая оценка вычисляется:
Итог = Округление(0.45 * ДЗ + 0.35 * КР + 0.2 * Э)
ДЗ — средняя оценка за домашние работы
КР — оценка за контрольную работу
Э — оценка за экзамен
Округление арифметическое.
Правила на автомат будут объявлены позднее
Правила сдачи заданий
Дедлайны по всем домашним заданиям являются жёсткими, то есть после срока работы не принимаются. Дата сдачи каждого ДЗ будет указана во время выдача работы.
При обнаружении плагиата оценки за домашнее задание обнуляются всем задействованным в списывании студентам, а также подаётся докладная записка в деканат. Следует помнить, что при повторном списывании деканат имеет право отчислить студента.
Лекции
Плейлист с видео: https://youtube.com/playlist?list=PLEwK9wdS5g0p_ExQfhTrtpP0hYElcGp-r&si=hwjgWsEjxY2a3vZX
1. 30.01.2023. Лекция 1. Введение в эксперименты, дизайн экспериментов и связь с гипотезами Видео
2. 03.02.2023. Лекция 2. Метрики продукта, роста и эксперимента. Что почему и как? Видео
3. 06.02.2023. Лекция 3. Подбор групп, статистические тесты, что такое хорошая сплит система. Видео
4. 13.02.2023. Лекция 4. Прокси метрики и алгоритм их подбора, разные подходы к дизайну сплит систем. Видео
5. 20.02.2023. Лекция 5. Расчет размера выборки для t-test. Подход к расчету через симуляцию. Видео
6. 27.02.2023. Лекция 6. Ratio-метрики и проблема зависимых данных в t-test. Оценка дисперсии и связь с дельта-методом. Видео
7. 02.03.2023. Лекция 7. Линеаризация. Оценка экспериментов с квантилями. Видео
Домашние задания
| Задание | Ссылка на домашнее задание | Дата выдачи | Дедлайн |
|---|---|---|---|
| 1 | ДЗ-1 | 14-02-2024 | 02-03-2024 23:30 |
| 2 | ДЗ-2 | 28-02-2024 | 10-03-2024 23:30 |
| 3 | - | - | - |
| 4 | - | - | - |
Контрольная работа
Контрольная работа состоится на лекции в конце курса (дата будет объявлена позже). Продолжительность — 80 минут. Проходит очно для студентов московского кампуса, для остальных онлайн
