Назад
4 дня назад

Data Engineer (DWH/ETL)

Формат работы
remote (Global)
Тип работы
fulltime
Грейд
middle
Страна
Russia
RUВакансия из Hirify RU, списка российских tech-компаний

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Data Engineer (DWH/ETL): Развитие корпоративной платформы данных и DWH с акцентом на миграцию ETL-процессов с SSIS на Apache Airflow 3 и внутренний Python-фреймворк. Focus on построении отказоустойчивых data-пайплайнов, контроле качества данных, оптимизации SQL и развитии CI/CD и архитектуры DWH.

Локация: удалённая работа из любой точки мира; при желании — офисы в Москве, Нижнем Новгороде, Коврове или Владимире.

Компания

Ви.Тех — аккредитованная ИТ-компания с командой более 500 сотрудников, создающая решения для крупнейшего российского e-commerce бизнеса ВсеИнструменты.ру.

Что делать

  • Развивать корпоративную платформу данных и DWH.
  • Переводить ETL-процессы с SSIS на Apache Airflow 3 и внутренний YAML-driven Python-фреймворк.
  • Разрабатывать и поддерживать надёжные data-пайплайны с retry, backfill, идемпотентностью, дедупликацией и корректной обработкой сбоев.
  • Развивать проверки качества данных, оптимизировать SQL и работу с Microsoft SQL Server.
  • Развивать CI/CD, создавать переиспользуемые инструменты и self-service решения для аналитических команд.
  • Участвовать в развитии архитектуры DWH и подходов к моделированию данных.

Требования

  • Опыт работы Data Engineer от 3 лет.
  • Уверенный SQL и практический опыт работы с Microsoft SQL Server.
  • Python: ООП, модульная архитектура, type hints, тестирование, логирование, работа с REST API и базами данных.
  • Опыт работы с Apache Airflow или другим промышленным оркестратором.
  • Опыт работы с dbt или аналогичным SQL transformation framework.
  • Понимание ETL/ELT, batch- и near-real-time-обработки.
  • Умение строить надёжные и отказоустойчивые data-пайплайны.
  • Опыт Git и CI/CD, реализации Data Quality-проверок.
  • Понимание архитектуры DWH, организации слоёв данных и подходов к моделированию: Kimball, Inmon, Data Vault, Anchor Modeling.

Культура и преимущества

  • Удалённая работа из любой точки мира или работа из офиса по желанию.
  • Возможность влиять на продукт, предлагать идеи и получать обратную связь.
  • Дружелюбная открытая атмосфера, внутренние митапы, участие в конференциях и обмен опытом.
  • Перфоманс-ревью два раза в год с премией до двух окладов и прозрачными грейдами.
  • Расширенный ДМС со стоматологией; подключение членов семьи со скидкой.
  • Предоставление техники или возможность работать на собственном оборудовании.

Будьте осторожны

Если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого. Это мошенники. Обязательно жмите «Пожаловаться» или пишите в поддержку. Подробнее в гайде →