Практические профессии

Онлайн-курс «Инженер конвейеров данных»

Проектировать надёжные потоки данных для аналитики и продуктов. Обучение построено вокруг практики и завершается самостоятельной итоговой работой.

Автор и составитель программы

Дамир Шарифьянов

Full-stack разработчик и автор образовательных материалов

Дамир отвечает за структуру курса, понятность объяснений и связь теории с практическими задачами. Опыт, специализацию и примеры проектов можно проверить в профиле автора.

Опыт и проекты автора →

Итоговый результат: ETL-платформа с хранилищем, качеством данных и мониторингом.

Визуальная карта курса «Инженер конвейеров данных»Путь от изучения темы к практике и готовому проектуПРАКТИЧЕСКИЕ ПРОФЕССИИИнженер конвейеров данныхНавык → проект → работа1Разобратьсяс понятиями2Применитьна практике{ }Создать проектдля портфолио
12 модулейот основ до проекта
33–45 часовв удобном темпе
Автопроверкаобратная связь сразу
Сертификатс проверкой подлинности
О программе

Кому подойдёт курс и чему вы научитесь

Курс подходит

  • Новичкам, планирующим первую работу в IT
  • Самоучкам, собирающим доказательное портфолио
  • Специалистам, систематизирующим профессиональные навыки

Практические навыки

  • Разбирать «Роль Data Engineer» на практическом примере
  • Проектировать «Моделирование данных» на практическом примере
  • Применять «Продвинутый SQL» на практическом примере
  • Проверять «Python для pipelines» на практическом примере
  • Сравнивать решения для «ETL и ELT» на практическом примере
  • Объяснять результат по теме «Хранилища данных» на практическом примере
Программа обучения

Что вы изучите и создадите

Каждый модуль объясняет отдельную тему простыми словами и закрепляет её практикой.

Модуль 1 · Основа

Роль Data Engineer

«Роль Data Engineer» простыми словами — это умение решить рабочую задачу и оформить воспроизводимое доказательство личного вклада. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Модуль 2 · Основа

Моделирование данных

«Моделирование данных» простыми словами — это умение выделить сущности, границы и связи, затем проверить схему на основном и аварийном сценариях. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Модуль 3 · Основа

Продвинутый SQL

«Продвинутый SQL» простыми словами — это умение определить единицу наблюдения и качество исходных данных, выполнить расчёт и проверить вывод независимым способом.

Модуль 4 · Сборка

Python для pipelines

«Python для pipelines» простыми словами — это умение решить рабочую задачу и оформить воспроизводимое доказательство личного вклада. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Модуль 5 · Сборка

ETL и ELT

«ETL и ELT» простыми словами — это умение решить рабочую задачу и оформить воспроизводимое доказательство личного вклада. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Модуль 6 · Сборка

Хранилища данных

«Хранилища данных» простыми словами — это умение определить единицу наблюдения и качество исходных данных, выполнить расчёт и проверить вывод независимым способом.

Модуль 7 · Сборка

dbt

«dbt» простыми словами — это умение решить рабочую задачу и оформить воспроизводимое доказательство личного вклада. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Модуль 8 · Сборка

Airflow

«Airflow» простыми словами — это умение решить рабочую задачу и оформить воспроизводимое доказательство личного вклада. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Модуль 9 · Проверка и усиление

Потоковые данные

«Потоковые данные» простыми словами — это умение определить единицу наблюдения и качество исходных данных, выполнить расчёт и проверить вывод независимым способом.

Модуль 10 · Проверка и усиление

Качество данных

«Качество данных» простыми словами — это умение задать наблюдаемое поведение, подготовить репрезентативные случаи и сравнить ожидаемый результат с фактическим.

Модуль 11 · Проверка и усиление

Наблюдаемость и CI

«Наблюдаемость и CI» простыми словами — это умение собрать воспроизводимый путь поставки, автоматизировать проверки и отработать безопасный откат. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Модуль 12 · Защита

Защита платформы

«Защита платформы» простыми словами — это умение решить рабочую задачу и оформить воспроизводимое доказательство личного вклада. Мы превращаем выполненную задачу в доказательство навыка, которое может проверить другой специалист.

Результат

ETL-платформа с хранилищем, качеством данных и мониторингом

По ходу курса ученик выполняет практические задания, проверяет себя и постепенно готовит итоговую работу.

Что нужно знать до начала

Нужны базовые навыки инструментов, перечисленных в программе. Перед началом пройдите вводные курсы по незнакомым технологиям. Курс не вводный: желательно заранее выполнить небольшой проект по этой теме.

Инструменты курса

Python, SQL, PostgreSQL, Airflow, dbt, Docker

Формат

Теория простыми словами, разобранный пример, практика, автопроверка и итоговый проект

Можно начать сразу

Перейдите от программы к практике

Доступ ко всем модулям, автопроверке и сертификату — 49 900 ₽.

Начать обучение →

Ответы на вопросы

Подойдёт ли курс новичку?

Это не вводный курс. Перед началом желательно: Нужны базовые навыки инструментов, перечисленных в программе. Перед началом пройдите вводные курсы по незнакомым технологиям. Курс не вводный: желательно заранее выполнить небольшой проект по этой теме..

Как проверяются задания?

Система проверяет текст ответа по критериям урока и короткий тест. Код, сайт или другой результат ученик прикладывает как доказательство: система оценивает объяснение, но не запускает проект автоматически.

Когда я получу сертификат?

Именной сертификат освоения основной части программы автоматически выпускается после зачёта 80% модулей. В нём указано, сколько модулей пройдено; обучение можно продолжить до 100%.

Купить за 49 900 ₽