Msbdp 21 minimal — различия между версиями
Материал из Wiki - Факультет компьютерных наук
VeLKerr (обсуждение | вклад) (→Учебные ассистенты) |
VeLKerr (обсуждение | вклад) (→Домашние задания) |
||
| (не показано 17 промежуточных версии этого же участника) | |||
| Строка 18: | Строка 18: | ||
== Формы контроля == | == Формы контроля == | ||
| − | === | + | === Домашние задания === |
| + | |||
| + | [https://docs.google.com/spreadsheets/d/1d9J_m1gZy6Wlo9gmT8djORJyy6NFkHj9UoHdGakAgwg/edit#gid=1696598796 Дашборд проверки домашек]. Обновляется раз в 10 минут. Штраф за сдачу после мягкого дедлайна 50%. | ||
| + | |||
{| class="wikitable" | {| class="wikitable" | ||
|- | |- | ||
| Строка 25: | Строка 28: | ||
! Жёсткий deadline | ! Жёсткий deadline | ||
|- | |- | ||
| − | |[https://gitlab.com/VeLKerr/hse_bigdata/-/blob/master/homeworks/ | + | |[https://gitlab.com/VeLKerr/hse_bigdata/-/blob/master/homeworks/02-mapreduce.md MapReduce] || 16.03, 23:59 || 24.03, 23:59 |
|- | |- | ||
| − | + | |[https://docs.google.com/document/d/14M5b-HVg_i3VxzhY72r9DMXYfr2urwR4kUa7hKLn9SU Spark] || 01.04, 23:59 || 01.04, 23:59 | |
| − | + | ||
| − | + | ||
| − | + | ||
| − | |[https://docs.google.com/document/d/14M5b-HVg_i3VxzhY72r9DMXYfr2urwR4kUa7hKLn9SU Spark] ||01. | + | |
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
|} | |} | ||
=== Мини-контрольные === | === Мини-контрольные === | ||
| − | Состоится | + | Состоится 3 контрольные, которые будут проводиться с помощью системы прокторинга http://exams.mipt.ru/. По ссылке доступна [https://drive.google.com/file/d/1n0iR-IaPnT4EeEEUCksODQnjl34L8Xlc/view?usp=sharing инструкция пользователя]. |
На контрольных нельзя пользоваться IDE и интернетом. Код писать не потребуется. | На контрольных нельзя пользоваться IDE и интернетом. Код писать не потребуется. | ||
| Строка 48: | Строка 43: | ||
! Длительность | ! Длительность | ||
|- | |- | ||
| − | | МИСОБОД. HDFS & MAPREDUCE || | + | | МИСОБОД. HDFS & MAPREDUCE || 11.03 || 15 мин. |
| + | |- | ||
| + | | МИСОБОД. SQL over BigData || 25.03 || 15 мин. | ||
| + | |- | ||
| + | | МиСОБОД. Spark streaming, Kafka & NoSQL || 28.03 || 20 мин. | ||
|} | |} | ||
| − | В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить [https://forms.gle/ | + | В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить [https://forms.gle/jJMN8vkCuqNnNhZGA '''форму на дописывание''']. Дописывание состоится 28.03 во время семинара. |
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
| − | + | ||
== Преподаватели == | == Преподаватели == | ||
* Ивченко Олег - основной преподаватель | * Ивченко Олег - основной преподаватель | ||
| − | |||
* [https://ru.linkedin.com/in/dmitry-lakhvich-a610706b Лахвич Дмитрий] - лектор по Spark и Spark Streaming | * [https://ru.linkedin.com/in/dmitry-lakhvich-a610706b Лахвич Дмитрий] - лектор по Spark и Spark Streaming | ||
* Липовский Роман - лектор по NoSQL over BigData | * Липовский Роман - лектор по NoSQL over BigData | ||
| − | |||
==== Учебные ассистенты ==== | ==== Учебные ассистенты ==== | ||
* Прохоров Михаил | * Прохоров Михаил | ||
Текущая версия на 12:35, 28 марта 2022
Содержание
О курсе
- Курс читается для студентов 4-го курса ФКН ВШЭ в 1-2 модулях.
- Форма контроля: экзамен.
Важные ссылки
Лекции
Семинары
Инфраструктура
Формы контроля
Домашние задания
Дашборд проверки домашек. Обновляется раз в 10 минут. Штраф за сдачу после мягкого дедлайна 50%.
| Домашка | Мягкий deadline | Жёсткий deadline |
|---|---|---|
| MapReduce | 16.03, 23:59 | 24.03, 23:59 |
| Spark | 01.04, 23:59 | 01.04, 23:59 |
Мини-контрольные
Состоится 3 контрольные, которые будут проводиться с помощью системы прокторинга http://exams.mipt.ru/. По ссылке доступна инструкция пользователя. На контрольных нельзя пользоваться IDE и интернетом. Код писать не потребуется.
| Название события на http://exams.mipt.ru/ | Дата | Длительность |
|---|---|---|
| МИСОБОД. HDFS & MAPREDUCE | 11.03 | 15 мин. |
| МИСОБОД. SQL over BigData | 25.03 | 15 мин. |
| МиСОБОД. Spark streaming, Kafka & NoSQL | 28.03 | 20 мин. |
В случае если вы не сможете написать КР в указанную дату по технической или другой уважительной причине, просьба заполнить форму на дописывание. Дописывание состоится 28.03 во время семинара.
Преподаватели
- Ивченко Олег - основной преподаватель
- Лахвич Дмитрий - лектор по Spark и Spark Streaming
- Липовский Роман - лектор по NoSQL over BigData
Учебные ассистенты
- Прохоров Михаил
Список рекомендуемых материалов
Основная литература
- Tom White, Hadoop: The Definitive Guide, 4th Edition Storage and Analysis at Internet Scale, Publisher: O'Reilly, Media Release Date: April 2015
- Karau, H., Konwinski, A., Wendell, P., & Zaharia, M, Learning Spark: Lightning-Fast Big Data Analysis
- Holden Karau et al. Learning Spark. Lightning-fast Data Analytics. Preview Edition. O’Reilly, 2015.
Дополнительная литература
- Chuck Lam. Hadoop in Action. New York: Manning Publications co.
- Alex Holmes , "Hadoop in Practice"
- Martin Fowler, "NoSQL"
- Eric Redmond, Jim R. Wilson, "Seven Databases in Seven Weeks"
- Jonathan Leibiusky, "Getting Started with Storm"
- Donald Miner, Adam Shook. MapReduce Design Patterns. O’Reilly.
- Arun C. Murthy et al. Apache Hadoop YARN. Addison-Wesley.
- Spark Core Programming. TutorialsPoint, 2015.
- Dario Simonassi, Gabriel Eisbruch, Jonathan Leibiusky. Getting Started with Storm. O’Reilly.
- Edward Capriolo, Dean Wampler, and Jason Rutherglen. Programming Hive. O’Reilly.
- Lars George. HBase: The Definitive Guide. O’Reilly.
- Eben Hewitt. Cassandra: The Definitive Guide. O’Reilly.
