Чему вы научитесь
- Познакомитесь с профессией Data Engineer и основными задачами дата-инженера.
- Разберётесь, какие инструменты используются для работы с данными и зачем они нужны.
- Подробно изучите Apache Airflow и научитесь создавать и запускать DAG'и.
- Поймёте, как организовывать зависимости между задачами и управлять пайплайнами.
- Познакомитесь с ClickHouse и основными принципами работы с ним.
- Узнаете, как данные перемещаются между различными системами.
- Получите общее представление о Kafka, PostgreSQL, S3 и других инструментах из современного Data Stack.
- Поймёте, как выглядит типичный процесс построения ETL/ELT-пайплайна.
О курсе
Курс для знакомства с Data Engineering и основными инструментами дата-инженера. Разберём, чем занимается Data Engineer, как устроена работа с данными и какие технологии используются в современных проектах.
Основное внимание уделим Apache Airflow — подробно разберём его возможности и научимся работать с DAG, задачами, операторами и зависимостями. Также познакомимся с ClickHouse и другими популярными инструментами Data Engineering.
Курс подойдёт тем, кто хочет понять профессию дата-инженера, попробовать основные инструменты и получить базу для дальнейшего развития в этой области.
Для кого этот курс
Для тех, кто хочет познакомиться с Data Engineering и понять, чем занимается дата-инженер.
Для начинающих специалистов, которые хотят разобраться в основных инструментах Data Engineering.
Для тех, кто хочет подробно изучить Airflow и попробовать применять его на практике.
Для специалистов, уже работающих с данными, которые хотят расширить свой кругозор и познакомиться с другими инструментами.
Для тех, кто хочет получить общее представление о ClickHouse, Kafka, PostgreSQL, S3 и других технологиях.
Начальные требования
Если какой-нибудь код накидать сможешь, то достаточно
Наши преподаватели
Как проходит обучение
Я написал, вы читаете
Программа курса
загружаем...
Сертификат
Сертификат Stepik
Отзывы прошедших курс
загружаем...
Что вы получаете
- Понимание того, чем занимается Data Engineer и как устроена эта профессия.
- Представление о современном Data Stack и основных инструментах дата-инженера.
- Практический опыт работы с Apache Airflow.
- Понимание того, как создавать и организовывать ETL/ELT-пайплайны.
- Базовые знания ClickHouse и других инструментов для работы с данными.
- Понимание того, как различные технологии взаимодействуют между собой в реальных проектах.
- Основу для дальнейшего самостоятельного изучения Data Engineering.
Сколько стоит обучение
Price:
998 ₽
Вы попробовали и поняли, что вам сейчас не подходит этот курс? Ничего страшного, мы вернём вам деньги в течение 30-ти дней после покупки.