Plus
Включить Plus
Назад
Яндекс
2 дня назад

Инженер данных DWH (Путешествия)

200 000 - 400 000₽
Формат работы
hybrid
Тип работы
fulltime
Страна
Russia

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/

TL;DR

Инженер данных DWH (Путешествия) (DWH/ETL): Разработка, сопровождение и ревью ETL-процессов поставки данных и проектирование структуры хранения в слоях DWH с акцентом на производительность, качество преобразований и оптимизацию неэффективных участков. Фокус на моделировании данных, партиционировании/индексации/сжатии и профилировании ETL для снижения нагрузки на систему.

Локация: Москва (м. Павелецкая) или Санкт-Петербург (м. Площадь Ленина), гибрид; также указана удалённая работа «Весь мир»

Зарплата: 200 000 — 400 000 ₽/мес до налогов

Компания

Яндекс развивает DWH и инфраструктуру данных для продукта в сфере путешествий.

Что делать

  • Разрабатывать, сопровождать и проводить ревью ETL-процессов поставки данных: извлечение, трансформация, загрузка, расписания, мониторинг, исправление ошибок и документация.
  • Проектировать структуру хранения данных в разных слоях DWH: схемы, модели данных, партиционирование, индексация и сжатие.
  • Анализировать и оптимизировать неэффективные участки ETL: профилирование, поиск аномалий/избыточности, пересмотр алгоритмов трансформаций.
  • Погружаться в бизнес-области путешествий: разбираться в логике расчёта метрик и источниках их формирования.

Требования

  • Опыт проектирования DWH (слои, модели хранения данных, ETL-процессы).
  • Разработка ETL-процессов на Apache Airflow или аналогах.
  • Настройка поставок данных по API.
  • SQL на уровне эксперта.
  • Программирование на языке высокого уровня (Python, Go, Java и т. д.).
  • Понимание архитектуры реляционных баз данных и алгоритмов/структур данных для больших данных.

Хорошо, если есть

  • Опыт работы с MPP-СУБД (Greenplum, ClickHouse, Vertica, Teradata и т. д.).
  • Понимание распределённой обработки данных (Hadoop, MapReduce и MPP).

Культура и преимущества

  • Расширенная медицинская страховка с первого месяца, включая стоматологию, ежегодные чекапы и помощь за рубежом.
  • Психотерапия (в офисе или онлайн), лазерная коррекция зрения через год работы, поддержка беременности и родов через два года.
  • Страховка для родственников по схеме 80/20.
  • Обучение и менторство, оплата участия в профильных конференциях.
  • Гибкий график без фиксированного времени начала и конца рабочего дня.
  • Спортзалы в офисах и скидки в фитнес-клубах; жилищные займы для сотрудников в российских офисах.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →