Senior Data Engineer (Data Lake)

TL;DR

Senior Data Engineer (Data Lake): Разработка и оптимизация инфраструктуры данных и аналитических витрин с акцентом на автоматизацию процессов сбора, хранения, обработки и нормализации данных. Фокус на поиске оптимальных решений для предоставления данных во внутрибанковские приложения и развитии экспертизы в сфере финансов.

Локация: Полная удалёнка (РФ)

Salary: 7 500 – 9 000 $/мес на руки

Компания

Крупный банк, специализирующийся на корпоративном бизнесе, с развитой культурой обратной связи.

Что делать

• Поиск оптимальных путей предоставления данных в различные внутрибанковские приложения.
• Автоматизация процессов сбора, хранения, обработки и нормализации данных (ETL).
• Разработка внутренних программных решений для оптимизации работы аналитиков.
• Общение с клиентами системы и технической поддержкой поставщиков данных.
• Поддержка продукта при изменениях в инфраструктуре данных.

Требования

• Уверенное владение Python 3.
• Понимание экосистемы Hadoop.
• Опыт работы с Apache Spark, Apache Airflow, Apache NiFi.
• Опыт работы с потоками данных (Apache Kafka, Spark Streaming, Flink).
• Опыт работы с SQL-базами данных (PostgreSQL, Greenplum).
• Опыт работы в Agile-команде.

Хорошо, если есть

• Опыт веб-разработки (Flask, FastAPI).
• Опыт работы с DevOps-инструментами (Docker, K8s, Ansible).

Культура и преимущества

• Возможность работать из офиса или удаленно.
• ДМС со стоматологией, массажем, телемедициной и ежегодными чек-апами.
• Страхование от несчастных случаев и онкологических заболеваний.
• Три оплачиваемых отгула в год и доплаты к больничным/отпускам.
• Поддержка опытного наставника, обучающие курсы и участие в конференциях.
• Бесплатные индивидуальные консультации психологов, юристов, экспертов по личным финансам.