DE-практикум: Spark, Docker, Postgres, Airflow, S3. Поток 4.

Живой DE-практикум для тех, у кого уже есть рабочий SQL и кто хочет руками пройти путь от локального стенда до DWH, ETL, Spark, Airflow и BI. Поднимаете mini-кластер на ноутбуке, собираете сквозной пайплайн и получаете цельный проект для портфолио и собеседований.
Средний уровень
5

Чему вы научитесь

  • Поднимать локальный стенд: Spark + Postgres + Airflow + JupyterLab + MinIO в Docker
  • Понимать, что за что отвечает в окружении, и разбирать типовые проблемы по логам
  • Организовывать слои RAW / STG / CORE / MARTS на реальном датасете
  • Делать идемпотентные и инкрементальные загрузки
  • Проектировать факты, измерения, event-даты и витрины
  • Писать базовые SQL- и Spark-трансформации для подготовки слоёв
  • Оформлять пайплайн в Airflow DAG: зависимости, ретраи, расписание
  • Делать DQ-проверки: дубли, пустые ключи, расхождения по слоям
  • Собирать финальную витрину и простой BI-дашборд
  • Оформлять результат в Git-репозитории и уверенно рассказывать про свой ETL-проект на собеседовании

О курсе

Это закрытый живой DE-практикум для тех, у кого уже есть рабочий SQL и кто хочет руками пройти путь от локального стенда до витрин, DAG и BI.

Внутри вы поднимете mini-DWH на ноутбуке, разложите данные по слоям RAW / STG / CORE / MARTS, настроите загрузки и трансформации в SQL и Spark, оформите оркестрацию в Airflow и доведёте результат до финальной витрины и простого BI-дашборда.

Старт потока — 23 июня 2026.
Стоимость — 35 000 ₽.

Что посмотреть в первую очередь:

✅ Страница практикума

Программа, входные требования, формат обучения и ответы на частые вопросы.

Короткая диагностика входа
Если хотите быстро понять, подходите ли по уровню и технике.

Telegram для вопросов (@dim4eg91)
Если хотите сначала уточнить детали напрямую.

Как попасть на практикум

Перед оплатой обязательно:

  1. Пройти короткую диагностику

  2. Я смотрю вашу анкету и говорю, подходит ли вам этот поток.

  3. После подтверждения вы получаете инструкции по старту и доступ к приватному репозиторию.

📌 Технические требования

Для участия в практикуме вам потребуется:

  • ноутбук/ПК с 16 ГБ ОЗУ (минимум 12 ГБ, но комфортнее 16+);

  • Windows 10/11, Linux или macOS с включённой виртуализацией;

  • установленный Docker Desktop / Docker (инструкции даю);

  • стабильный интернет;

  • аккаунт на GitHub (вы присылаете логин, я даю доступ к приватному репозиторию).

Для кого этот курс

Для кого этот курс

Практикум подойдёт:

Аналитикам и BI-специалистам, которые хотят перейти в Data Engineering не через абстрактные лекции, а через реальный проект;

Junior DE и backend-разработчикам, которым не хватает цельной практики: DWH, Spark, Airflow, витрины и BI;

Тем, у кого уже есть рабочий SQL и кто хочет не просто смотреть уроки, а собрать руками ETL-пайплайн и получить сильный кейс для портфолио.

Начальные требования

уверенная база по SQL: SELECT, JOIN, GROUP BY, базовые агрегаты, CTE
понимание, что такое факты, измерения и слои данных на уровне идей
базовое знакомство с Python: читать код, править простые функции, не бояться списков и словарей
готовность поставить Docker по инструкции и немного разбираться с окружением
желание не просто “запустить ноутбук”, а понять логику и архитектуру пайплайна

Наши преподаватели

Как проходит обучение

Вы проходите практикум в своём темпе, без созвонов и видео-марафонов.

Сначала заполняете диагностику и пишете мне в Telegram. После подтверждения получаете доступ к приватному GitHub-репозиторию и инструкции по запуску стенда.

Дальше поднимаете локальное окружение у себя на машине, проходите модули по шагам и собираете проект: SQL, Spark, Docker, Airflow, DWH, BI.

По ходу задаёте вопросы в чате. Я помогаю с окружением, логами, ошибками в коде и ключевыми решениями по пайплайну.

Рекомендованный темп — 6-8 часов в неделю.

Программа курса

загружаем...

Что вы получаете

  • цельный проект для портфолио: mini-DWH + сквозной ETL + витрина + BI-дашборд
  • навык поднятия локального DE-стенда без магии и страха перед Docker
  • понимание, как устроены RAW / STG / CORE / MARTS, инкременты, DAG и DQ-проверки
  • опыт работы с Git и приватным репозиторием как в реальной команде
  • поддержку на первых шагах: разбор логов, ошибок, архитектурных решений
  • материалы и репозиторий, к которым можно возвращаться позже, когда будете собирать свой следующий пайплайн

Сколько стоит обучение

Price: 35 000 
Вы попробовали и поняли, что вам сейчас не подходит этот курс? Ничего страшного, мы вернём вам деньги в течение 30-ти дней после покупки.

Часто задаваемые вопросы

Расскажите о курсе друзьям

Price: 35 000