5 дней назад
Middle Data Engineer (Apache Airflow)
hhВакансия с HeadHunter. Контакт ведёт на hh.ru
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Middle Data Engineer (Apache Airflow): разработка инфраструктуры данных для сбора, хранения и обработки игровых и продуктовых метрик с акцентом на Apache Airflow, CDC, SQL-витрины и Apache Flink. Focus on построении надежных пайплайнов, контроле качества данных и оптимизации обработки в аналитическом хранилище.
Локация: Алматы; удалённая работа, также доступна работа из офисов в разных странах
Компания
Компания развивает игровые продукты и инфраструктуру данных для работы с игровыми и продуктами метриками.
Что делать
- Разрабатывать и поддерживать DAG’и для Apache Airflow.
- Настраивать процессы CDC для передачи продакшн-данных в аналитическое хранилище.
- Разрабатывать и оптимизировать SQL-витрины данных для аналитических задач.
- Разрабатывать трансформации данных на базе Apache Flink.
- Контролировать качество данных и оптимизировать их обработку.
Требования
- Более 6 лет опыта в Data Engineering.
- Уверенные знания Python и Java.
- Глубокое понимание SQL.
- Опыт работы с Apache Kafka, Apache Airflow, dbt, Great Expectations, Apache Flink, Apache Trino/Presto, Hive, Docker, MongoDB, PostgreSQL и AWS.
Хорошо, если есть
- Опыт работы с Apache Spark, Kubernetes, CI/CD, Helm и Terraform.
- Навыки программирования на Scala.
Культура и преимущества
- Возможность влиять на продукт и решения внутри команды.
- Прямая коммуникация без лишней бюрократии и обмен опытом.
- Официальное оформление и гибкий подход к формату и месту работы.
- Медицинское страхование, чекапы и компенсация сессий с психологом.
- Корпоративная библиотека, внутренние курсы, английский язык, обучение и профильные мероприятия за счёт компании.
- Ноутбук, необходимые программы и лицензии, скидки на фитнес и компенсация участия в спортивных соревнованиях.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Похожие вакансии
NDA
2 дня назад
Data Engineer (MDM)
100 000 - 300 000₽
СимбирСофт
5 дней назад
Data Engineer
Adviva
6 дней назад
Senior Data Engineer (FinTech)
MY.GAMES
5 дней назад
Lead Data Engineer (Gamedev)
EX CORP.
3 дня назад
Analyst Developer (Data Analytics & BI)
3 000$
SJ Global
5 дней назад
Middle Data Engineer (аутстафф)
200 000 - 220 000₽