Team Lead Data Engineer

Teamlead Data Engineer в S7 Group

МоскваОбязанности :

• Управление командой разработки в продуктах систем класса DWH;
• Распределение задач, ответственность за результат команды;
• Формирование архитектурных решений для решения нестандартных задач;
• Разработка, поддержка и оптимизация ETL процессов для формирования слоя модели данных и витрин данных, а так же загрузки данных систем источников из корпоративной шины данных (kafka, s3);
• Настройка инструментов и фреймворков для обработки и анализа данных;
• Взаимодействие с командой аналитиков по постановке задач и выявлению приоритетов, с командой разработки по технической реализации, со смежными командами (DBA, devops);
• Миграция с легаси решений на новые целевые;

Требования :

• Экспертное знание SQL;
• Владение одним из языков программирования (Python, Scala, Java);
• Понимание способов моделирования систем класса DWH и компонентов платформы данных;
• Опыт работы с MPP системами (Vertica, Greenplum, Trino), глубокое понимание особенностей работы распределенных вычислений;
• Оркестраторы ETL процессов (Airflow, Dagster);
• Опыт управления командой разработки от 2-3 человек;

Будет плюсом:

• Распределенный брокер Kafka;
• DQ фреймворки (GreatExpectations, Soda, Deeque и т. д.);
• Распределенные объектные хранилища(HDFS, S3);
• Принципы контейнеризации и оркестрации (Docker, Kubernetes);

Условия:

• Работать из офиса в самом центре Москвы или выбрать гибридный формат;
• Летать по корпоративным тарифам S7 Airlines. Спойлер: почти бесплатно!
• Заботиться о себе: ДМС после испытательного срока, бесплатные тренировки и безлимитные консультации юристов, психологов и других специалистов;
• Развиваться и расти: обучение по профилю — за наш счет!

Откликнуться: hh.ru/vacancy/123750078 ​Также укажите, что узнали о вакансии в телеграм-канале IT / Tech jobs