Назад
3 дня назад

Senior Data Engineer (Streaming)

Формат работы
remote (только Russia)/hybrid
Тип работы
fulltime
Грейд
senior
Страна
Russia
hhВакансия с HeadHunter. Контакт ведёт на hh.ru

Мэтч & Сопровод

Покажет вашу совместимость и напишет письмо

Описание вакансии

Текст:
/
TL;DR
Senior Data Engineer (Streaming) (Apache Flink/ScyllaDB): Проектирование и запуск отказоустойчивых NRT-пайплайнов для кредитного конвейера, антифрода, ML-моделей и банковских сервисов с акцентом на потоковую обработку данных и развитие Feature Store. Focus on построении распределенной архитектуры на Apache Flink и ScyllaDB, интеграции со Spark и DWH-инструментами, а также обеспечении качества и надежности production-систем.

Локация: Москва; удаленный или гибридный формат работы на выбор

Компания

Продуктовая технологическая команда Uzum Technologies развивает Data Platform, Customer Catalog и высоконагруженную платформу класса Feature Store.

Что делать

  • Проектировать архитектуру продуктов, Feature Store и целевой стриминг-платформы.
  • Разрабатывать и запускать отказоустойчивые NRT-пайплайны на базе Apache Flink для кредитного конвейера и антифрода.
  • Организовывать поставку потоковых данных и фичей для обучения и инференса ML-моделей в реальном времени.
  • Интегрировать потоковые решения со ScyllaDB, Apache Spark, DWH-инструментами и клиентскими сервисами.
  • Декомпозировать задачи, участвовать в планировании спринтов и оценивать трудозатраты.
  • Разрабатывать тесты, проводить code review и обеспечивать поддержку решений на третьей линии.

Требования

  • Коммерческий опыт и уверенные знания Apache Flink и технологий потоковой обработки данных.
  • Глубокое знание Python и/или Java.
  • Опыт работы с Apache Spark и понимание оркестрации процессов в Apache Airflow.
  • Понимание Kubernetes и построения CI/CD-пайплайнов.
  • Опыт проектирования архитектуры распределенных систем, разработки тестов и поддержания качества кода.
  • Более 6 лет опыта работы.

Хорошо, если есть

  • Опыт работы с высоконагруженными NoSQL-базами данных, особенно ScyllaDB или Apache Cassandra.
  • Интерес к backend-разработке и готовность использовать Golang и Scala для задач DWH.

Культура и преимущества

  • Сильная техническая команда и возможность влиять на ключевые бизнес-процессы.
  • Продуктовая культура с опорой на исследования, метрики и результат.
  • Свобода действий и гибкий график.
  • Официальное оформление по ТК УЗ и три дополнительных оплачиваемых дня к отпуску.
  • Возможность получить IT-визу, приравненную к ВНЖ, для специалистов — резидентов IT-парка.
  • Возможности развития личного бренда на конференциях, митапах и внутренних мероприятиях.

Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →