Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Data Engineer (Recommendation Systems): Разработка и развитие платформы данных для обеспечения работы ML-специалистов и аналитиков с акцентом на проектирование хранилищ и оптимизацию ETL-процессов. Фокус на миграции данных в Apache Iceberg, поддержке высоконагруженных пайплайнов на Greenplum и интеграции новых источников данных.
Компания
Объединенная технологическая компания Wildberries и Russ, лидер рынка e-commerce и наружной рекламы.
Что делать
- Поддерживать и оптимизировать пайплайны на Greenplum.
- Сопровождать ETL/ELT-процессы: мониторинг, диагностика деградаций и управление партиционированием.
- Интегрировать новые источники данных и проектировать схемы интеграции.
- Взаимодействовать с продуктовыми командами и владельцами источников данных.
- Участвовать в миграции слоев данных под Apache Iceberg.
Требования
- Опыт работы от 5 лет в области инженерии данных.
- Уверенное владение Airflow как оркестратором.
- Опыт работы с Hadoop (Spark, Yarn, HDFS).
- Опыт работы с Greenplum или другими MPP-системами.
- Опыт использования Trino в качестве query engine.
Культура и преимущества
- Аккредитованная IT-компания с полным социальным пакетом.
- ДМС со стоматологией, корпоративный спорт и психологические консультации.
- Корпоративный университет, языковые клубы и программы развития навыков.
- Гибкий подход к работе и забота о балансе карьеры и личной жизни.
- Скидки на обучение, страхование и партнерские программы.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →