Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
DevOps Инженер (Платформа Данных): Разработка и поддержка инфраструктуры для платформы данных маркетплейса с акцентом на Airflow DAGs, Kubernetes-окружение и оркестрацию пайплайнов. Фокус на миграции Airflow 2.x → Airflow 3.x, развитии CI/CD для DBT-моделей и обеспечении стабильной работы сервисов Data Engineering.
Локация: Удаленно
Компания
RWB — международная технологическая компания, объединяющая Wildberries и Russ, развивающая инфраструктуру платформы данных.
Что делать
- Диагностировать и устранять инфраструктурные проблемы, влияющие на выполнение Airflow DAGs.
- Поддерживать Data Engineering по Kubeflow Spark: проверка гипотез, отладка и подготовка тестовых SparkApplication.
- Разрабатывать и дорабатывать Helm-чарты для прототипирования и проверки инфраструктурных гипотез.
- Участвовать в миграции Airflow 2.x на Airflow 3.x.
- Собирать требования к библиотекам и изменениям в Docker-образах для Data Engineering-команд.
- Развивать CI/CD для сборки и доставки DBT-моделей, включая blue-green deployment.
Требования
- Опыт работы с Airflow в роли инфраструктурного инженера и понимание архитектуры Airflow (LocalExecutor, KubernetesExecutor, CeleryExecutor).
- Уверенные знания Kubernetes и умение оперативно диагностировать проблемы на уровне Deployment, StatefulSet, CRD и PVC.
- Понимание Helm: доработка существующих чарты и создание новых (umbrella chart — преимущество).
- Базовое понимание GitOps и практический опыт с Argo CD (преимущество).
- Базовый опыт с GitLab CI: сборка и поддержка CI/CD-пайплайнов на основе шаблонов.
- Готовность брать ownership за критичные инсталляции и сервисы Data Engineering.
Культура и преимущества
- Обучение и развитие: языковые клубы, корпоративный университет, программы развития управленческих навыков.
- Благополучие: корпоративный пакет ДМС со стоматологией, корпоративный спорт, консультации психолога.
- Сообщества по интересам: клуб спикеров, футбол, йога, шахматы и др.
- Поддержка семей: гибкий подход и проекты для детей сотрудников.
- Комфортная рабочая среда: бесплатное питание в офисе, современные офисы рядом с метро, корпоративная техника.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →