Мэтч & Сопровод
Покажет вашу совместимость и напишет письмо
Описание вакансии
Текст:
TL;DR
Data Engineer (Middle) (iGaming): Разработка и оркестрация ELT/ETL-пайплайнов, DWH и аналитических витрин для Betera с акцентом на Apache Airflow, dbt, Trino, Apache Iceberg и качество данных. Focus on интеграции REST API, баз данных и Kafka, оптимизации SQL-запросов, мониторинге аномалий и повышении производительности хранилища.
Локация: Минск, проспект Независимости, 173. Формат работы: на месте работодателя; после испытательного срока — гибридный формат.
Компания
Betera развивает проекты и сервисы на рынке Беларуси.
Что делать
- Проектировать, разрабатывать и оптимизировать ELT/ETL-пайплайны с использованием Apache Airflow и dbt.
- Интегрировать REST API, базы данных, Kafka, Web Scraping и Google Sheets.
- Развивать DWH и аналитические витрины на базе Trino и Apache Iceberg в S3.
- Настраивать проверки качества данных, мониторинг аномалий и алертинг.
- Оптимизировать SQL-запросы и процессы обработки данных, поддерживать существующие пайплайны и интеграции.
- Документировать архитектуру данных, слои DWH и интеграции.
Требования
- От 3 лет опыта в Data Engineering.
- Уверенное знание SQL: сложные запросы, оконные функции, агрегации, планы выполнения и оптимизация.
- Уверенное владение Python для работы с API, обработки данных и автоматизации.
- Практический опыт работы с Apache Airflow и dbt.
- Понимание проектирования DWH, слоев данных и подходов Data Vault, Kimball или Inmon.
- Опыт настройки Data Quality; базовые навыки Docker и Git.
Хорошо, если есть
- Опыт работы с AWS S3, Apache Iceberg, Delta Lake, Trino, Presto или ClickHouse.
- Опыт работы с каталогами данных, включая Project Nessie, Apache Polaris или AWS Glue.
- Базовый опыт PySpark, Kubernetes и KubernetesPodOperator.
- Опыт работы с потоковыми данными и Apache Kafka.
- Опыт взаимодействия с Apache Superset, Power BI или Tableau.
Культура и преимущества
- Полная занятость, график 5/2 с 10:00 до 18:00.
- Конкурентная заработная плата и бонусы.
- 5 Days Off и 16 Hours off для решения личных дел в рабочее время.
- Современный офис с зонами отдыха, спортивными активностями и оборудованием для досуга.
- Оплата внешнего обучения, компенсация транспорта, медицинской страховки и занятий спортом.
- Корпоративные, волонтерские и экологические проекты.
Будьте осторожны: если работодатель просит войти в их систему, используя iCloud/Google, прислать код/пароль, запустить код/ПО, не делайте этого - это мошенники. Обязательно жмите "Пожаловаться" или пишите в поддержку. Подробнее в гайде →