Назад

Middle Data Engineer (Apache Airflow)

Формат работы
remote (только Kazakhstan)
Тип работы
fulltime
Грейд
middle
Страна
Kazakhstan
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Middle Data Engineer (Apache Airflow): разработка инфраструктуры данных для сбора, хранения и обработки игровых и продуктовых метрик с акцентом на Apache Airflow, CDC, SQL-витрины и Apache Flink. Focus on построении надежных пайплайнов, контроле качества данных и оптимизации обработки в аналитическом хранилище.

Локация: Алматы; удалённая работа, также доступна работа из офисов в разных странах

Компания

Компания развивает игровые продукты и инфраструктуру данных для работы с игровыми и продуктами метриками.

Что делать

  • Разрабатывать и поддерживать DAG’и для Apache Airflow.
  • Настраивать процессы CDC для передачи продакшн-данных в аналитическое хранилище.
  • Разрабатывать и оптимизировать SQL-витрины данных для аналитических задач.
  • Разрабатывать трансформации данных на базе Apache Flink.
  • Контролировать качество данных и оптимизировать их обработку.

Требования

  • Более 6 лет опыта в Data Engineering.
  • Уверенные знания Python и Java.
  • Глубокое понимание SQL.
  • Опыт работы с Apache Kafka, Apache Airflow, dbt, Great Expectations, Apache Flink, Apache Trino/Presto, Hive, Docker, MongoDB, PostgreSQL и AWS.

Хорошо, если есть

  • Опыт работы с Apache Spark, Kubernetes, CI/CD, Helm и Terraform.
  • Навыки программирования на Scala.

Культура и преимущества

  • Возможность влиять на продукт и решения внутри команды.
  • Прямая коммуникация без лишней бюрократии и обмен опытом.
  • Официальное оформление и гибкий подход к формату и месту работы.
  • Медицинское страхование, чекапы и компенсация сессий с психологом.
  • Корпоративная библиотека, внутренние курсы, английский язык, обучение и профильные мероприятия за счёт компании.
  • Ноутбук, необходимые программы и лицензии, скидки на фитнес и компенсация участия в спортивных соревнованиях.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →