1 день назад
Инженер данных (финтех)
RUВакансия из Hirify RU, списка российских tech-компаний
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Инженер данных (финтех) (SQL/Python/Airflow): Развитие Lakehouse-платформы для финансовых продуктов и сервисов, создание data pipelines, интеграций и наборов данных для аналитических и продуктовых команд с акцентом на обработку больших объемов данных и качество данных. Focus on проектирование переиспользуемых паттернов загрузки и расчета витрин, развитие модели данных, оптимизацию производительности и работу с Trino.
Локация: Москва и Краснодар — гибрид или офис; другие города — удаленно. Доступна полная удаленная работа, при желании — гибридный или офисный формат.
Компания
Развитие финтех-направления MAGNIT и современной data-платформы на базе Lakehouse для финансовых продуктов и сервисов.
Что делать
- Развивать архитектуру Lakehouse и участвовать в развитии LakeHouse в Trino.
- Создавать и поддерживать data pipelines, интеграции и качественные наборы данных для аналитических и продуктовых команд.
- Разрабатывать паттерны загрузки данных и расчета витрин для повторного использования.
- Развивать модель данных, рефакторить процессы и внедрять лучшие практики работы с данными.
- Проводить code review аналитиков для выбора технических решений и оптимизации производительности.
- Самостоятельно вести проекты, необходимые бизнесу.
Требования
- Знание особенностей MPP-систем.
- Уверенное владение SQL: оконные функции, партицирование, агрегации, оптимизация запросов и понимание плана запроса.
- Опыт с Python, достаточный для разработки операторов в Airflow и написания пайплайнов данных из различных источников.
- Понимание принципов работы Airflow: DAG, задачи, операторы, сенсоры, хуки и контекст.
- Опыт работы с Greenplum, Kafka, Iceberg, S3 и dbt.
- Готовность работать с большими объемами данных и финтех-кейсами.
Культура и преимущества
- Интересный сложный продукт с большим количеством пользователей.
- Полная удаленная работа или гибридный/офисный формат по желанию.
- Оформление в IT-компании, аккредитованной в Министерстве цифрового развития.
- Добровольное медицинское страхование.
- Современный стек технологий.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →