Построение хранилища данных по Event Driven Architecture (EDA)
- Введение в EDA и хранение данных
- Архитектура событий: принципы и паттерны
- Источники событий и договоренности о данных
- Форматы событий и эволюция схем
- Модель данных в EDA: потоки, факты и измерения
- Change Data Capture и инкрементальные загрузки
- Потоковые платформы: Kafka и экосистемы
- Хранилище событий: Event Store и логи
- Архитектура конвейеров на потоках
- ELT в эпоху событий: подходы и задачи
- Моделирование EDW: размерности, факты и агрегаты
- Архитектура агрегаций и материализованных видов
- Data Vault и классическое Dimensional Modeling
- Управление качеством данных: проверки и профилирование
- Идемпотентность, повторяемость и отказоустойчивость пайплайнов
- Контракты данных и эволюция схем
- Метаданные, каталоги и линейки данных
- Безопасность, доступ и соответствие требованиям
- Наблюдаемость: мониторинг, трассировка и лог-аналитика
- Тестирование потоковых пайплайнов и CI/CD для данных
- Архитектурные паттерны: Lambda, Kappa, CQRS в EDA
- Выбор технологий для источников, брокеров и хранилищ
- Интеграция с целевыми хранилищами: Snowflake, BigQuery, Redshift
- Data Lakehouse: объединение lake и warehouse
- Масштабирование, отказоустойчивость и эксплуатационная управляемость
- Практические кейсы и дорожная карта проекта



