Теория и практика онлайн-экспериментов 23/24 — различия между версиями

Материал из Wiki - Факультет компьютерных наук
Перейти к: навигация, поиск
(→‎О курсе)
(→‎Домашние задания)
 
(не показано 15 промежуточных версии этого же участника)
Строка 16: Строка 16:
 
Группа в telegram для обсуждения: [https://t.me/tpoe2324 тык2]
 
Группа в telegram для обсуждения: [https://t.me/tpoe2324 тык2]
  
−
Anytask: [тык3], инвайт: ''''''
+
Anytask: [https://anytask.org/course/1089 тык3], инвайт: IsHG1V4
 +
 
 +
Github с материалами: [https://github.com/nbagiyan/online-exp-course/tree/main тык4]
  
 
=== Консультации ===
 
=== Консультации ===
Строка 52: Строка 54:
 
== Лекции ==
 
== Лекции ==
  
−
== Семинары ==  
+
Плейлист с видео: https://youtube.com/playlist?list=PLEwK9wdS5g0p_ExQfhTrtpP0hYElcGp-r&si=hwjgWsEjxY2a3vZX
 +
 
 +
1. 30.01.2023. [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/lectures/1.pdf Лекция 1]. Введение в эксперименты, дизайн экспериментов и связь с гипотезами [https://youtu.be/bT7u4iO7PfM?si=2GEOwxZ6kdAD4nq8 Видео]
 +
 
 +
2. 03.02.2023. [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/lectures/2.pdf Лекция 2]. Метрики продукта, роста и эксперимента. Что почему и как? [https://youtu.be/CVXWVhMhVm8?si=vpoKdNZzPQ89KZBc Видео]
 +
 
 +
3. 06.02.2023. [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/lectures/3.pdf Лекция 3]. Подбор групп, статистические тесты, что такое хорошая сплит система. [https://youtu.be/IEme2Qvgtlk?si=uD10oDBa5KBLdgrq Видео]
 +
 
 +
4. 13.02.2023. [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/lectures/4.pdf Лекция 4]. Прокси метрики и алгоритм их подбора, разные подходы к дизайну сплит систем. [https://youtu.be/lEBTGB9p9cc?si=AOOkyyiEOkNe6AaC Видео]
 +
 
 +
5. 20.02.2023. [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/lectures/5.pdf Лекция 5]. Расчет размера выборки для t-test. Подход к расчету через симуляцию. [https://youtu.be/6-KOCGV8hcs?si=xCLf1vxAV1KhaxnO Видео]
 +
 
 +
6. 27.02.2023. [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/lectures/6.pdf Лекция 6]. Ratio-метрики и проблема зависимых данных в t-test. Оценка дисперсии и связь с дельта-методом. [https://youtu.be/SQVitk3hMdM?si=y2flmjm98L8HWsAu Видео]
 +
 
 +
7. 02.03.2023. [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/lectures/7.pdf Лекция 7]. Линеаризация. Оценка экспериментов с квантилями. [https://youtu.be/qTS5HMWYiY4?si=XRr2tL26Go6RaIXe Видео]
 +
 
 +
== Домашние задания ==  
  
  
 
{| class="wikitable"
 
{| class="wikitable"
 
|-
 
|-
−
! Задание !! Ссылка для сдачи !! Ссылка на домашнее задание !! Дата выдачи !! Дедлайн
+
! Задание !! Ссылка на домашнее задание !! Дата выдачи !! Дедлайн
 
|-
 
|-
−
| 1 || - || - || - || -
+
| 1 || [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/hw/hw-1/hw1.ipynb ДЗ-1] || 14-02-2024 || 02-03-2024 23:30
 
|-
 
|-
−
| 2 || - || - || - || -
+
| 2 || [https://github.com/nbagiyan/online-exp-course/blob/main/2024-spring/hw/hw-2/hw2.ipynb ДЗ-2] || 28-02-2024 || 10-03-2024 23:30
 
|-
 
|-
−
| 3 || - || - || - || -
+
| 3 || - || - || -
 
|-
 
|-
−
| 4 || - || - || - || -
+
| 4 || - || - || -
 
|-
 
|-
 
|}
 
|}
 +
 +
== Контрольная работа ==
 +
 +
Контрольная работа состоится на лекции в конце курса (дата будет объявлена позже). Продолжительность — 80 минут. Проходит очно для студентов московского кампуса, для остальных онлайн

Текущая версия на 14:39, 5 марта 2024

О курсе

Курс читается для студентов 4-го курса ПМИ ФКН ВШЭ в 3 модуле.

Лектор: Багиян Нерсес Карленович

Семинарист: Попов Даниил Викторович

Ассистент: Романко Елизавета Константиновна

Полезные ссылки

Таблица с оценками: Канал в telegram для объявлений: тык

Группа в telegram для обсуждения: тык2

Anytask: тык3, инвайт: IsHG1V4

Github с материалами: тык4

Консультации

Консультации с преподавателями и учебными ассистентами (если иное не оговорено на странице семинаров конкретной группы) по курсу проводятся по предварительной договорённости ввиду невостребованности регулярных консультаций.

При необходимости, можно писать в Telegram.

Правила выставления оценок

В курсе предусмотрено несколько форм контроля знания:

  • Контрольная работа (4-5 задач на 1 ч 20 мин) в очном формате или в онлайн для студентов не из Москве
  • 4 домашних задания.
  • Письменный экзамен (4-5 задач на 1 ч 20 мин) с прокторингом (включенная камера на которой видно студента, экран записывается)

Итоговая оценка вычисляется:

Итог = Округление(0.45 * ДЗ + 0.35 * КР + 0.2 * Э)

ДЗ — средняя оценка за домашние работы

КР — оценка за контрольную работу

Э — оценка за экзамен

Округление арифметическое.

Правила на автомат будут объявлены позднее

Правила сдачи заданий

Дедлайны по всем домашним заданиям являются жёсткими, то есть после срока работы не принимаются. Дата сдачи каждого ДЗ будет указана во время выдача работы.

При обнаружении плагиата оценки за домашнее задание обнуляются всем задействованным в списывании студентам, а также подаётся докладная записка в деканат. Следует помнить, что при повторном списывании деканат имеет право отчислить студента.

Лекции

Плейлист с видео: https://youtube.com/playlist?list=PLEwK9wdS5g0p_ExQfhTrtpP0hYElcGp-r&si=hwjgWsEjxY2a3vZX

1. 30.01.2023. Лекция 1. Введение в эксперименты, дизайн экспериментов и связь с гипотезами Видео

2. 03.02.2023. Лекция 2. Метрики продукта, роста и эксперимента. Что почему и как? Видео

3. 06.02.2023. Лекция 3. Подбор групп, статистические тесты, что такое хорошая сплит система. Видео

4. 13.02.2023. Лекция 4. Прокси метрики и алгоритм их подбора, разные подходы к дизайну сплит систем. Видео

5. 20.02.2023. Лекция 5. Расчет размера выборки для t-test. Подход к расчету через симуляцию. Видео

6. 27.02.2023. Лекция 6. Ratio-метрики и проблема зависимых данных в t-test. Оценка дисперсии и связь с дельта-методом. Видео

7. 02.03.2023. Лекция 7. Линеаризация. Оценка экспериментов с квантилями. Видео

Домашние задания

Задание Ссылка на домашнее задание Дата выдачи Дедлайн
1 ДЗ-1 14-02-2024 02-03-2024 23:30
2 ДЗ-2 28-02-2024 10-03-2024 23:30
3 - - -
4 - - -

Контрольная работа

Контрольная работа состоится на лекции в конце курса (дата будет объявлена позже). Продолжительность — 80 минут. Проходит очно для студентов московского кампуса, для остальных онлайн

Источник — «http://wiki.cs.hse.ru/index.php?title=Теория_и_практика_онлайн-экспериментов_23/24&oldid=84025»