МОВС Data Engineering (2023-24 уч. год, 6 модуль)

О курсе

Занятия проводятся в Zoom по ... в ...

Онлайн-курс в дополнение к парам: online-course link

Контакты

Чат курса в TG: chat link

Преподаватель: Дикалин Кирилл

Ассистент	Контакты
Андрей Бабынин	@maninoffice
Максим	@mlixakov

Материалы курса

Плейлист курса на YouTube: https://www.youtube.com/playlist?list=PLmA-1xX7IuzAlLMt5dER6WYXFuTNhmVpG

Ссылка на GitHub с материалами курса: GitHub repository

Занятие	Тема	Дата	Материалы для самоподготовки к семинарам	Дополнительные материалы
1 Запись	Ноутбук DWH. Анализ требований, проектирование Data Vault
2 Запись	Ноутбук
3 Запись	Ноутбук Источники данных в DWH
4 Запись	Ноутбук Работа с данными в разных временных контекстах
5 Запись	Ноутбук Асинхронные и сложные зависимости в данных
6 Запись	Ноутбук Стриминг данных
7 Запись	Ноутбук Оптимизация производительности

Формула оценивания

Оценка = ...<вес 1>...*О_{...<форма контроля 1>...} + ...<вес 2>...*О_{...<форма контроля 2>...} + ...<вес 3>...*О_{...<форма контроля 3>...}

Литература

• Kimball, R. and M. Ross. The Data Warehouse Toolkit: The Complete Guide to Dimensional Modeling (Second Edition), 2002
• Inmon, W. H., Teradata, and Corporation. (2016). Building the Data Warehouse. John Wiley & Sons.
  Redman, T. C. (1996). Data Quality: The Field Guide. Digital Press.
• "Медленно меняющееся измерение (SCD)"
• Connelly, J. Asynchronous Data Dependencies in Distributed Systems. ACM Digital Library.
  Ousterhout, J. A. (2013). A Philosophy of Software Design. Addison-Wesley.
  Martin, R. C. (2017). Clean Architecture: A Craftsman's Guide to Software Structure and Design. Pearson Education.
  Fowler, M. (2012). Patterns of Enterprise Application Architecture. Addison-Wesley.
  Смит, М., & Дэвидсон, Р. (2015). Разработка эффективных алгоритмов и программ. Вильямс.
  Gamma, E., Helm, R., Johnson, R., & Vlissides, J. (1994). Design Patterns: Elements of Reusable Object-Oriented Software. Addison-Wesley.
• "SQL Performance Explained" by Markus Winand.
  "High Performance MySQL" by Baron Schwartz, Peter Zaitsev, Vadim Tkachenko.
  "Designing Data-Intensive Applications" by Martin Kleppmann.
  "The Data Warehouse Toolkit: The Definitive Guide to Dimensional Modeling" by Ralph Kimball and Margy Ross.
  "Practical ETL Design: Building High-Performance Data Integration Systems" by Jordan Tigani and Christopher Jones.

...

• Jay Kreps - "I Heart Logs: Event Data, Stream Processing, and Data Integration"
  Nathan Marz, James Warren - "Big Data: Principles and best practices of scalable real-time data systems"