Data Engineer (Fintech)

TL;DR

Инженер данных (Fintech): Создание и развитие нового аналитического хранилища данных с акцентом на построение ETL-процессов и архитектуру DWH. Фокус на оптимизации сложной логики обработки больших объемов данных и обеспечении высокой доступности сервиса.

Локация: Гибридный офис

Компания

Yandex — технологический гигант, создающий платежные продукты и сервисы для управления личными финансами в рамках направления Финтех.

Что делать

• Разрабатывать и поддерживать ETL-процессы для извлечения и обработки данных из различных источников.
• Оптимизировать и рефакторить сложную аналитическую логику, ориентируясь на работу с большими объемами данных.
• Проектировать структуру и закладывать основы современного аналитического хранилища (DWH).
• Обеспечивать стабильность, полноту и корректность данных, минимизируя количество сбоев.
• Взаимодействовать с аналитиками для перевода бизнес-требований в эффективные технические решения.

Требования

• Опыт работы от 3 лет.
• Уверенное владение Python и глубокие знания SQL.
• Понимание устройства современных СУБД.
• Опыт работы с CI/CD, системами контроля версий, код-ревью и мониторингом.
• Навыки работы в Unix-подобных системах (Linux, macOS).

Хорошо, если есть

• Опыт создания высоконагруженных ETL/ELT процессов (Hadoop, Hive, Spark).
• Опыт работы с потоковой обработкой данных (Kafka, Spark Streaming, Flink).
• Знакомство с аналитическими БД (ClickHouse, Greenplum, Vertica, Teradata).
• Владение инструментами анализа данных на Python (pandas, SciPy, Matplotlib, Jupyter).
• Опыт менторства стажеров или работы по Agile.

Культура и преимущества

• Работа в новом проекте без legacy-кода с возможностью влиять на архитектуру.
• Профессиональный рост как в инженерном плане, так и в бизнес-домене Финтеха.
• Гибридный формат работы.
• Использование современных инженерных практик и подходов в разработке.