3 дня назад
Senior Data Engineer (Streaming)
hhВакансия с HeadHunter. Контакт ведёт на hh.ru
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Senior Data Engineer (Streaming) (Apache Flink/ScyllaDB): Проектирование и запуск отказоустойчивых NRT-пайплайнов для кредитного конвейера, антифрода, ML-моделей и банковских сервисов с акцентом на потоковую обработку данных и развитие Feature Store. Focus on построении распределенной архитектуры на Apache Flink и ScyllaDB, интеграции со Spark и DWH-инструментами, а также обеспечении качества и надежности production-систем.
Локация: Москва; удаленный или гибридный формат работы на выбор
Компания
Продуктовая технологическая команда Uzum Technologies развивает Data Platform, Customer Catalog и высоконагруженную платформу класса Feature Store.
Что делать
- Проектировать архитектуру продуктов, Feature Store и целевой стриминг-платформы.
- Разрабатывать и запускать отказоустойчивые NRT-пайплайны на базе Apache Flink для кредитного конвейера и антифрода.
- Организовывать поставку потоковых данных и фичей для обучения и инференса ML-моделей в реальном времени.
- Интегрировать потоковые решения со ScyllaDB, Apache Spark, DWH-инструментами и клиентскими сервисами.
- Декомпозировать задачи, участвовать в планировании спринтов и оценивать трудозатраты.
- Разрабатывать тесты, проводить code review и обеспечивать поддержку решений на третьей линии.
Требования
- Коммерческий опыт и уверенные знания Apache Flink и технологий потоковой обработки данных.
- Глубокое знание Python и/или Java.
- Опыт работы с Apache Spark и понимание оркестрации процессов в Apache Airflow.
- Понимание Kubernetes и построения CI/CD-пайплайнов.
- Опыт проектирования архитектуры распределенных систем, разработки тестов и поддержания качества кода.
- Более 6 лет опыта работы.
Хорошо, если есть
- Опыт работы с высоконагруженными NoSQL-базами данных, особенно ScyllaDB или Apache Cassandra.
- Интерес к backend-разработке и готовность использовать Golang и Scala для задач DWH.
Культура и преимущества
- Сильная техническая команда и возможность влиять на ключевые бизнес-процессы.
- Продуктовая культура с опорой на исследования, метрики и результат.
- Свобода действий и гибкий график.
- Официальное оформление по ТК УЗ и три дополнительных оплачиваемых дня к отпуску.
- Возможность получить IT-визу, приравненную к ВНЖ, для специалистов — резидентов IT-парка.
- Возможности развития личного бренда на конференциях, митапах и внутренних мероприятиях.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Похожие вакансии
Yandex
4 дня назад
Инженер данных в команду UGC Поиска (Python)
Digital Chief
4 дня назад
Data Engineer (Data Governance)
280 000₽
Технократия
4 дня назад
Data Engineer (Fintech)
Московская биржа
9 дней назад
Data Engineer (Fintech)
Yandex
4 дня назад
Data Engineer (Autonomous Transport)
7 дней назад