1 день назад
Senior Data Engineer (FinTech)
hhВакансия с HeadHunter. Контакт ведёт на hh.ru
Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Senior Data Engineer (FinTech): Развитие DWH/ODS и построение batch- и потоковых пайплайнов с акцентом на Apache Airflow, ClickHouse, PostgreSQL и Apache Kafka. Focus on оптимизацию производительности баз данных, рефакторинг legacy-процессов, контроль качества данных и обеспечение SLA.
Локация: Тбилиси; 100% удалённая работа
Компания
Adviva развивает решения, связанные с финансовыми и поведенческими метриками, риск-отчётностью и системами принятия решений.
Что делать
- Проектировать, разрабатывать и поддерживать batch-процессы, витрины данных и регламентные расчёты в Apache Airflow.
- Развивать DWH/ODS и аналитические витрины в ClickHouse для риск-отчётности и систем принятия решений.
- Строить near real-time доставку данных через Apache Kafka и развивать ODS на PostgreSQL.
- Проектировать схемы, настраивать инкрементальную загрузку и интегрировать данные с backend продукта.
- Оптимизировать PostgreSQL, MySQL и ClickHouse, включая индексы, схемы и тяжёлые запросы.
- Проводить аудит legacy-скриптов и DAG'ов, настраивать мониторинг, алертинг, контроль качества данных и SLA.
Требования
- От 1 года до 3 лет опыта в Data Engineering.
- Отличное знание Python и SQL.
- Уверенный опыт создания и поддержки production ETL/ELT-пайплайнов; Apache Airflow обязателен.
- Опыт проектирования аналитических витрин и оптимизации сложных запросов в ClickHouse.
- Глубокое знание PostgreSQL и MySQL, а также опыт построения ODS/DWH поверх операционных источников.
- Самостоятельность, понимание принципов отказоустойчивых и масштабируемых систем, готовность документировать схемы, правила и зоны ответственности.
Хорошо, если есть
- Опыт работы с Apache Kafka, S3/MinIO и Apache NiFi.
- Опыт миграции пайплайнов и наведения порядка в унаследованной инфраструктуре.
- Бэкграунд в FinTech, платежах или AntiFraud.
- Навыки CI/CD для дата-инженерии и Infrastructure as Code.
Культура и преимущества
- Высокая автономность в принятии технических решений без микроменеджмента.
- Современный стек: Airflow, ClickHouse, Kafka, PostgreSQL, S3/MinIO и Python.
- 100% удалённый формат работы.
Процесс найма
- В сопроводительном письме необходимо описать объёмы данных в ClickHouse и PostgreSQL.
- Нужно указать опыт самостоятельного ведения дата-инфраструктуры, работы с Kafka и финтех- или риск-метриками.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →
Похожие вакансии
1 день назад
Senior Data Engineer (Fintech)
Альфа-Банк
6 дней назад
Senior Data Engineer (Python)
MY.GAMES
5 часов назад
Lead Data Engineer (Gamedev)
3 часа назад
Senior Data Engineer (Python/SQL)
ITQuick
7 часов назад
Lead Data Engineer / Data Platform Lead (Fintech)
7 часов назад