Senior/Middle Data Engineer

Локация: Ташкент, Мирзо-Улугбекский район, улица Шахрисабз, 30. Работа на месте работодателя.

Компания

Ipotekabank OTP Group — компания, для которой развивается внутренняя платформа данных.

Что делать

• Разрабатывать и сопровождать ETL/ELT-пайплайны.
• Разрабатывать, поддерживать и оптимизировать DAG в Apache Airflow.
• Проектировать интеграции и потоки данных, работать с DWH ODS/DDS/ADS и большими объёмами данных.
• Оптимизировать запросы, пайплайны и процессы обработки данных.
• Анализировать и устранять инциденты, повышать стабильность процессов и реализовывать проверки качества данных.
• Взаимодействовать с аналитиками, Data Scientists и другими командами, участвовать в code review, развитии Data Platform и технической документации.

Требования

• От 3 до 6 лет опыта работы.
• Уверенные SQL и Python.
• Практический опыт работы с Apache Airflow и разработки ETL/ELT-пайплайнов.
• Опыт работы с DWH и понимание архитектуры ODS/DDS/ADS.
• Опыт работы с MPP СУБД, предпочтительно Greenplum, а также понимание оптимизации запросов и пайплайнов.
• Опыт работы с Git и code review, понимание Data Quality и Data Governance.

Хорошо, если есть

• Опыт работы с ClickHouse и S3.
• Понимание Data Vault.
• Опыт настройки мониторинга и алертинга.
• Знакомство с каталогами данных, например OpenMetadata.
• Опыт CI/CD и DevOps-практик.

Культура и преимущества

• Участие в развитии инженерных практик и технической документации.
• Для Senior — участие в архитектурных решениях и менторинге команды.